Ciência de dados

Eu tenho uma variedade de conjuntos de dados da NFL que acho que podem ser um bom projeto paralelo, mas ainda não fiz nada com eles. Ir a este site me fez pensar em algoritmos de aprendizado de máquina e me pergunto o quanto eles podem ser bons em prever …

40 machine-learning  sports 

Estou tentando entender as principais diferenças entre GBM e XGBOOST. Tentei pesquisar no google, mas não consegui encontrar boas respostas que explicassem as diferenças entre os dois algoritmos e por que o xgboost quase sempre tem um desempenho melhor que o GBM. O que torna o XGBOOST tão rápido?

40 machine-learning  algorithms  xgboost  ensemble-modeling  gbm 

Recentemente, em uma aula de Machine Learning do professor Oriol Pujol da UPC / Barcelona, ​​ele descreveu os algoritmos, princípios e conceitos mais comuns a serem usados ​​em uma ampla variedade de tarefas relacionadas ao aprendizado de máquina. Aqui eu os compartilho com você e pergunto: existe alguma estrutura abrangente …

39 machine-learning  algorithms 

Estou prestes a treinar uma grande rede LSTM com 2 a 3 milhões de artigos e estou enfrentando erros de memória (uso o AWS EC2 g2x2large). Eu descobri que uma solução é reduzir o batch_size. No entanto, não tenho certeza se esse parâmetro está relacionado apenas a problemas de eficiência …

38 deep-learning  keras 

Um aspirante a cientista de dados aqui. Não sei nada sobre o Hadoop, mas como tenho lido sobre Data Science e Big Data, vejo muita conversa sobre o Hadoop. É absolutamente necessário aprender o Hadoop para ser um cientista de dados?

38 bigdata  apache-hadoop 

Estou tendo problemas para entender a diferença entre equivariante para tradução e invariante para tradução . No livro Deep Learning . MIT Press, 2016 (I. Goodfellow, A. Courville e Y. Bengio), pode-se encontrar nas redes convolucionais: [...] a forma específica de compartilhamento de parâmetros faz com que a camada tenha …

38 neural-network  deep-learning  convolution 

Eu me consideraria um cientista de dados de jornada. Como a maioria (acho), fiz meus primeiros gráficos e fiz minhas primeiras agregações no ensino médio e na faculdade, usando o Excel. Enquanto eu cursava a faculdade, a pós-graduação e os 7 anos de experiência profissional, rapidamente peguei o que considero …

37 tools  career  excel 

Eu executei um modelo xgboost. Eu não sei exatamente como interpretar a saída de xgb.importance. Qual é o significado de ganho, cobertura e frequência e como os interpretamos? Além disso, o que significa% Split, RealCover e RealCover? Eu tenho alguns parâmetros extras aqui Existem outros parâmetros que podem me dizer …

37 machine-learning  xgboost 

Estou trabalhando no problema com muitos recursos e o treinamento dos meus modelos leva muito tempo. Eu implementei o algoritmo de seleção direta para escolher os recursos. No entanto, eu queria saber se o scikit-learn tem seleção direta / algoritmo de regressão gradual?

37 feature-selection  scikit-learn 

Eu tenho um quadro de dados do pandas com várias entradas e quero calcular a correlação entre a renda de algum tipo de loja. Existem várias lojas com dados de renda, classificação da área de atividade (teatro, lojas de roupas, alimentos ...) e outros dados. Tentei criar um novo quadro …

35 python  statistics  visualization  pandas 

Eu já vi dois programas de certificação de ciência de dados - o John Hopkins, disponível no Coursera, e o Cloudera . Tenho certeza que existem outros por aí. O conjunto de classes de John Hopkins está focado no R como um conjunto de ferramentas, mas abrange uma variedade de …

35 education 

Costumava-se para os usuários de diferentes comunidades citar coisas engraçadas sobre seus campos. Pode ser divertido compartilhar suas coisas engraçadas sobre Machine Learning, Deep Learning, Data Science e as coisas que você enfrenta todos os dias!

35 machine-learning  neural-network  deep-learning 

Li em algum lugar que, se tivermos recursos muito correlacionados, precisaremos remover um, pois isso pode piorar o modelo. É claro que recursos correlatos significam que eles trazem as mesmas informações; portanto, é lógico remover um deles. Mas não consigo entender por que isso pode piorar o modelo.

35 machine-learning  correlation 

Suponha que eu crie um NN para classificação. A última camada é uma camada densa com ativação softmax. Eu tenho cinco classes diferentes para classificar. Suponha que, para um único exemplo de treinamento, true labelseja [1 0 0 0 0]enquanto estiverem as previsões [0.1 0.5 0.1 0.1 0.2]. Como eu …

35 machine-learning  deep-learning 

Ainda estou confuso sobre a diferença entre Densee TimeDistributedDensede Keras, embora já existam algumas perguntas semelhantes feitas aqui e aqui . As pessoas estão discutindo muito, mas não há conclusões comuns. E mesmo assim, aqui , @fchollet afirmou que: TimeDistributedDenseaplica uma mesma Denseoperação (totalmente conectada) a cada passo temporal de …

34 machine-learning  neural-network  keras