Ciência de dados

Minha empresa fornece serviços gerenciados para muitos de seus clientes. Nossos clientes geralmente usam as seguintes ferramentas de monitoramento para monitorar seus servidores / aplicativos da web: OpsView Nagios Pingdom Scripts de shell customizados Sempre que qualquer problema é encontrado, um e-mail de alerta chega à nossa equipe de Operações …

7 machine-learning  classification  clustering  feature-extraction 

Aparentemente, o Naive Bayes lida com os dados ausentes de maneira diferente, dependendo se eles existem em instâncias de treinamento ou teste / classificação. Ao classificar instâncias, o atributo com o valor ausente simplesmente não é incluído no cálculo de probabilidade ( http://www.inf.ed.ac.uk/teaching/courses/iaml/slides/naive-2x2.pdf ) No treinamento, "a instância [com os …

7 machine-learning  data-mining  classification  naive-bayes-classifier 

Estou lendo sobre a arquitetura lambda. Faz sentido. temos ingestão de dados baseada em fila. temos um armazenamento na memória para dados que é muito novo e temos HDFS para dados antigos. Portanto, temos todo o nosso conjunto de dados. no nosso sistema. muito bom. mas o diagrama da arquitetura …

7 bigdata  apache-hadoop 

De A_Roadmap_to_SVM_SMO.pdf , página 12. (fonte: postimg.org ) Suponha que eu esteja usando o kernel linear, como poderei obter o primeiro e o segundo produto interno? Meu palpite, produto interno do datapoint com datapoint j rotulado classe A para o primeiro produto interno da equação e produto interno do datapoint …

7 svm 

Eu tenho uma pergunta sobre o uso da rede neural. Atualmente, estou trabalhando com R ( pacote neuralnet ) e estou enfrentando o seguinte problema. Meu conjunto de testes e validação está sempre atrasado em relação aos dados históricos. Existe uma maneira de corrigir o resultado? Talvez algo esteja errado …

7 r  neural-network  time-series  forecast 

Estou explorando como modelar um conjunto de dados usando distribuições normais com média e variância definidas como funções lineares de variáveis ​​independentes. Algo como N ~ (f (x), g (x)). Eu gero uma amostra aleatória como esta: def draw(x): return norm(5 * x + 2, 3 *x + 4).rvs(1)[0] Então, …

7 python  statistics 

Onde posso encontrar um conjunto de dados espaço-temporal gratuito para download para que eu possa brincar com ele no R?

7 dataset  open-source  freebase 

Antes de tudo, sei que a pergunta pode não ser adequada para o site, mas eu realmente apreciaria se você me desse algumas dicas. Sou um programador de 16 anos, tenho experiência com diversas linguagens de programação. Há algum tempo, iniciei um curso no Coursera, intitulado introdução ao aprendizado de …

7 machine-learning  neural-network  svm 

então estou usando o Spark para fazer análises de sentimentos e continuo recebendo erros com os serializadores que ele usa (acho) para transmitir objetos python. PySpark worker failed with exception: Traceback (most recent call last): File "/Users/abdul/Desktop/RSI/spark-1.0.1-bin- hadoop1/python/pyspark/worker.py", line 77, in main serializer.dump_stream(func(split_index, iterator), outfile) File "/Users/abdul/Desktop/RSI/spark-1.0.1-bin- hadoop1/python/pyspark/serializers.py", line 191, …

7 apache-spark  pyspark  sentiment-analysis 

O conjunto de dados se parece com: 25000 observações até 15 preditores de diferentes tipos: numérico, multi-classe categórica, binário variável de destino é binária Qual método de validação cruzada é típico para esse tipo de problema? Por padrão, estou usando o K-Fold. Quantas dobras é suficiente neste caso? (Um dos …

7 classification  cross-validation 

Atualmente, estou trabalhando com um conjunto de dados com uma ampla variedade de comprimentos de documentos - de uma única palavra a uma página inteira de texto. Além disso, a estrutura gramatical e o uso da pontuação variam muito de um documento para outro. O objetivo é classificar esses documentos …

7 classification  nlp 

Eu sou novo no RHadoop e também no RMR ... Eu tinha um requisito para escrever um trabalho de Mapreduce no R Mapreduce. Eu tentei escrever, mas ao executar isso, dá um erro. Tring para ler o arquivo de hdfs Erro: Error in mr(map = map, reduce = reduce, combine …

7 machine-learning  r  apache-hadoop  map-reduce 

Estou tentando usar o módulo sklearn_pandas para estender o trabalho que faço nos pandas e mergulhar no aprendizado de máquina, mas estou com um erro que realmente não entendo como corrigir. Eu estava trabalhando no seguinte conjunto de dados no Kaggle . É essencialmente uma tabela sem cabeçalho (1000 linhas, …

7 python  pandas  scikit-learn 

Fiquei pensando desde que as CNNs dominaram todas as tarefas relacionadas à imagem. O detector de faces Viola-Jones ainda é considerado o estado da arte ou as CNNs superaram seu desempenho?

6 convnet 

Tenho imagens de palavras como abaixo: Digamos que é uma 256x64imagem. Meu objetivo é extrair o texto da imagem, 73791096754314441539que é basicamente o que um OCR faz. Estou tentando construir um modelo que possa reconhecer palavras de imagens. Quando estou dizendo palavra, pode ser uma das seguintes: Qualquer palavra do …

6 neural-network  deep-learning  tensorflow  rnn  ocr