Perguntas com a marcação «nlp»

Estou desenvolvendo um site interno para uma ferramenta de gerenciamento de portfólio. Há muitos dados de texto, nomes de empresas etc. Fiquei realmente impressionado com a capacidade de alguns mecanismos de pesquisa responderem rapidamente às consultas com "Você quis dizer: xxxx". Eu preciso ser capaz de responder de maneira inteligente …

436 algorithm  machine-learning  nlp  spell-checking  text-search 

Estou pensando em trabalhar em um projeto de PNL, em qualquer linguagem de programação (embora o Python seja a minha preferência). Quero pegar dois documentos e determinar como eles são semelhantes.

207 nlp 

A PNL de Stanford, demonstrada aqui , fornece uma saída como esta: Colorless/JJ green/JJ ideas/NNS sleep/VBP furiously/RB ./. O que significam as tags Part of Speech? Não consigo encontrar uma lista oficial. É o próprio sistema de Stanford ou eles estão usando tags universais? (O que é JJ, por exemplo?) …

172 java  nlp  stanford-nlp  part-of-speech 

Preciso encontrar uma maneira bastante eficiente de detectar sílabas em uma palavra. Por exemplo, Invisível -> in-vi-sib-le Existem algumas regras de silabificação que podem ser usadas: V CV VC CVC CCV CCCV CVCC * onde V é uma vogal e C é uma consoante. Por exemplo, Pronúncia (5 Pro-freira-cação; CV-CVC-CV-V-CVC) …

138 nlp  spell-checking  hyphenation 

Quando uso cada um? Além disso ... a lematização do NLTK depende de partes do discurso? Não seria mais preciso se fosse?

131 python  nlp  nltk  lemmatization 

No cliente de email do iOS, quando um email contém uma data, hora ou local, o texto se torna um hiperlink e é possível criar um compromisso ou visualizar um mapa simplesmente tocando no link. Não funciona apenas para e-mails em inglês, mas também em outros idiomas. Eu amo esse …

128 machine-learning  nlp  information-extraction  named-entity-recognition 

Estou começando a usar o NLTK e não entendo como obter uma lista de palavras do texto. Se eu usar nltk.word_tokenize(), recebo uma lista de palavras e pontuação. Eu preciso apenas das palavras. Como posso me livrar da pontuação? Também word_tokenizenão funciona com várias frases: pontos são adicionados à última …

125 python  nlp  tokenize  nltk 

Qual é a diferença entre um analisador de constituency e um analisador de dependência ? Quais são os diferentes usos dos dois?

114 parsing  nlp 

Fechado . Esta pergunta é baseada em opinião . Atualmente não está aceitando respostas. Quer melhorar esta questão? Atualize a pergunta para que possa ser respondida com fatos e citações editando este post . Fechado há 6 anos . Melhore esta questão Gostaria de saber qual linguagem de programação é …

112 java  python  nlp 

Eu tentei PorterStemmer e Snowball, mas ambos não funcionam em todas as palavras, perdendo algumas muito comuns. Minhas palavras de teste são: " gatos administrando comunidades de cactos cactos cactos ", e ambas acertam menos da metade. Veja também: Algoritmo de derivação que produz palavras reais Stemming - exemplos de …

111 nlp  stemming  lemmatization 

Estou trabalhando em um problema de análise de sentimento, os dados se parecem com este: label instances 5 1190 4 838 3 239 1 204 2 127 Portanto, meus dados estão desequilibrados, visto que 1190 instancesestão marcados com 5. Para a classificação, estou usando o SVC do scikit . O …

109 python  machine-learning  nlp  artificial-intelligence  scikit-learn 

Tenho alguns problemas para criar um novo modelo para Stanford Parser. Também baixei a última versão de Stanford: http://nlp.stanford.edu/software/lex-parser.shtml E aqui, Genia Corpus em 2 formatos, xml e ptb (Penn Treebank). Standford Parser pode treinar com arquivos ptd; aí baixei Genia Corpus, porque quero trabalhar com texto biomédico: http://categorizer.tmit.bme.hu/~illes/genia_ptb/ (link …

93 java  nlp  stanford-nlp 

Eu tenho um aplicativo .NET onde, dado um substantivo, quero prefixar corretamente essa palavra com "a" ou "an". Como eu faria isso? Antes de pensar, a resposta é simplesmente verificar se a primeira letra é uma vogal, considere frases como: um erro honesto um carro usado

93 c#  nlp  linguistics 

Estou lendo o artigo abaixo e tenho alguns problemas em entender o conceito de amostragem negativa. http://arxiv.org/pdf/1402.3722v1.pdf Alguém pode ajudar por favor?

91 machine-learning  nlp  word2vec 

É possível usar o Stanford Parser no NLTK? (Não estou falando sobre Stanford POS.)

90 python  parsing  nlp  nltk  stanford-nlp