Perguntas com a marcação «lstm»

Estou tentando reconciliar meu entendimento dos LSTMs e apontado aqui neste post por Christopher Olah implementado no Keras. Estou seguindo o blog escrito por Jason Brownlee para o tutorial de Keras. O que mais me deixa confuso é, A remodelagem das séries de dados em [samples, time steps, features]e, Os …

311 python  deep-learning  keras  lstm 

Considerando o código de exemplo . Gostaria de saber como aplicar gradiente nessa rede no RNN onde existe a possibilidade de explodir gradientes. tf.clip_by_value(t, clip_value_min, clip_value_max, name=None) Este é um exemplo que poderia ser usado, mas onde posso apresentá-lo? Na defesa do RNN lstm_cell = rnn_cell.BasicLSTMCell(n_hidden, forget_bias=1.0) # Split data …

96 python  machine-learning  tensorflow  deep-learning  lstm 

Eu estava examinando este exemplo de um modelo de linguagem LSTM no github (link) . O que ele faz em geral é bastante claro para mim. Mas ainda estou lutando para entender o que a chamada contiguous()faz, o que ocorre várias vezes no código. Por exemplo, na linha 74/75 da …

94 neural-network  deep-learning  lstm  pytorch  contiguous