Ciência de dados

Uma frase comumente ouvida no aprendizado de máquina não supervisionado é Entradas de alta dimensão normalmente vivem em um coletor de baixa dimensão ou próximo a ela O que é uma dimensão? O que é uma variedade? Qual é a diferença? Você pode dar um exemplo para descrever os dois? …

13 machine-learning  dimensionality-reduction 

Eu estava tentando implementar uma rede neural do zero para entender a matemática por trás dela. Meu problema está completamente relacionado à retropropagação quando adotamos derivada em relação ao viés) e deduzi todas as equações usadas na retropropagação. Agora, toda equação está de acordo com o código da rede neural, …

13 python  neural-network  backpropagation 

Quando solicito ao Keras para aplicar a previsão com um modelo ajustado a um novo conjunto de dados sem rótulo como este: model1.predict_classes(X_test) Funciona bem. Mas quando tento fazer previsão para apenas uma linha, ela falha: model1.predict_classes(X_test[10]) Exception: Error when checking : expected dense_input_6 to have shape (None, 784) but …

13 neural-network  keras 

Estou expandindo meu conhecimento do pacote Keras e tenho trabalhado com alguns dos modelos disponíveis. Eu tenho um problema de classificação binária da PNL que estou tentando resolver e tenho aplicado modelos diferentes. Depois de trabalhar com alguns resultados e ler mais e mais sobre LSTM, parece que essa abordagem …

12 neural-network  nlp  lstm  recurrent-neural-net 

Eu tenho tentado entender como representar e modelar dados para fazer uma previsão de séries temporais multidimensionais e multivariadas usando Keras (ou TensorFlow), mas ainda não sou muito claro depois de ler muitas postagens / tutoriais / documentação de blog sobre como apresentar os dados no forma correta (a maioria …

12 python  keras  rnn  lstm 

Estou tentando implementar camadas compartilhadas no Keras. Vejo que Keras tem keras.layers.concatenate, mas não tenho certeza da documentação sobre seu uso. Posso usá-lo para criar várias camadas compartilhadas? Qual seria a melhor maneira de implementar uma rede neural compartilhada simples, como mostrado abaixo usando Keras? Observe que todas as formas …

12 machine-learning  neural-network  deep-learning  keras  multitask-learning 

Preciso saber por que precisamos lidar com o desequilíbrio de dados. Eu sei como lidar com isso e métodos diferentes para resolver o problema, que é a amostragem por subida ou descida ou usando o Smote. Por exemplo, se eu tiver uma doença rara 1% em 100, e digamos que …

12 classification  dataset  sampling  class-imbalance 

Recentemente me deparei com a incorporação de gráficos, como o DeepWalk e o LINE. No entanto, ainda não tenho uma ideia clara do significado de incorporação de gráficos e quando usá-lo (aplicativos)? Todas as sugestões são bem-vindas!

12 graphs 

Eu tenho um grande conjunto de dados multidimensional que é gerado todos os dias. Qual seria uma boa abordagem para detectar qualquer tipo de 'anomalia' em comparação com os dias anteriores? Esse é um problema adequado que pode ser resolvido com redes neurais? Todas as sugestões são apreciadas. informações adicionais: …

12 tensorflow  keras  anomaly-detection 

Estou trabalhando em um projeto pequeno e pessoal, que utiliza as habilidades profissionais de um usuário e sugere a carreira ideal para elas, com base nessas habilidades. Eu uso um banco de dados de listas de empregos para conseguir isso. No momento, o código funciona da seguinte maneira: 1) Processe …

12 nlp  text-mining  similarity  cosine-distance 

Eu tenho um modelo convolucional + LSTM em Keras, semelhante a este (ref 1), que estou usando para um concurso Kaggle. A arquitetura é mostrada abaixo. Eu o treinei no meu conjunto rotulado de 11000 amostras (duas classes, a prevalência inicial é de ~ 9: 1, então eu ampliei os …

12 keras  cross-validation  overfitting 

No momento, estou jogando com Restricted Boltzmann Machines e, como estou nisso, gostaria de tentar classificar dígitos manuscritos com ele. O modelo que criei agora é um modelo generativo bastante sofisticado, mas não sei como ir mais longe. Em este artigo a palavra autor, que depois de criar um bom …

12 classification  rbm 

Quando fazemos a validação cruzada k-fold, devemos apenas usar o classificador que tem a maior precisão de teste? Qual é geralmente a melhor abordagem para obter um classificador da validação cruzada?

12 machine-learning  cross-validation 

Estou construindo um carro autônomo com controle remoto para se divertir. Estou usando um Raspberry Pi como computador de bordo; e estou usando vários plug-ins, como uma câmera Raspberry Pi e sensores de distância, para obter feedback sobre os arredores do carro. Estou usando o OpenCV para transformar os quadros …

12 reinforcement-learning  supervised-learning 

Como escolher K para PCA? K é o número de dimensões a serem projetadas. O único requisito é não perder muita informação. Entendo que depende dos dados, mas estou procurando mais uma visão geral simples sobre quais características considerar ao escolher K.

12 pca