La programmation nlp

18

Comment Google "Vouliez-vous dire?" Travail d'algorithme?

J'ai développé un site Web interne pour un outil de gestion de portefeuille. Il y a beaucoup de données textuelles, de noms d'entreprises, etc. J'ai été vraiment impressionné par la capacité de certains moteurs de recherche à répondre très rapidement aux questions avec "Vouliez-vous dire: xxxx". Je dois être en …

436 algorithm machine-learning nlp spell-checking text-search

10

Comment calculer la similitude entre deux documents texte?

Je cherche à travailler sur un projet NLP, dans n'importe quel langage de programmation (bien que Python sera ma préférence). Je veux prendre deux documents et déterminer leur similitude.

207 nlp

10

Java Stanford PNL: une partie des étiquettes de discours?

La PNL de Stanford, présentée ici , donne une sortie comme celle-ci: Colorless/JJ green/JJ ideas/NNS sleep/VBP furiously/RB ./. Que signifient les balises "Part of Speech"? Je ne parviens pas à trouver une liste officielle. S'agit-il du propre système de Stanford ou utilisent-ils des balises universelles? (Qu'est-ce que JJ, par exemple?) …

172 java nlp stanford-nlp part-of-speech

15

Détecter les syllabes dans un mot

J'ai besoin de trouver un moyen assez efficace de détecter les syllabes dans un mot. Par exemple, Invisible -> in-vi-sib-le Certaines règles de syllabification pourraient être utilisées: V CV VC CVC CCV CCCV CVCC * où V est une voyelle et C est une consonne. Par exemple, Prononciation (5 Pro-nun-ci-a-tion; …

138 nlp spell-checking hyphenation

9

Quelle est la différence entre la lemmatisation et la tige?

Quand dois-je utiliser chacun? Aussi ... la lemmatisation NLTK dépend-elle des parties du discours? Ne serait-ce pas plus précis si c'était le cas?

131 python nlp nltk lemmatization

6

Comment Apple trouve-t-il les dates, heures et adresses dans les e-mails?

Dans le client de messagerie iOS, lorsqu'un e-mail contient une date, une heure ou un lieu, le texte devient un hyperlien et il est possible de créer un rendez-vous ou de consulter une carte en appuyant simplement sur le lien. Cela fonctionne non seulement pour les e-mails en anglais, mais …

128 machine-learning nlp information-extraction named-entity-recognition

11

Comment se débarrasser de la ponctuation à l'aide du tokenizer NLTK?

Je commence tout juste à utiliser NLTK et je ne comprends pas très bien comment obtenir une liste de mots à partir d'un texte. Si j'utilise nltk.word_tokenize(), j'obtiens une liste de mots et de ponctuation. Je n'ai besoin que des mots à la place. Comment puis-je me débarrasser de la …

125 python nlp tokenize nltk

1

Différence entre l'analyseur de circonscription et l'analyseur de dépendances

Quelle est la différence entre un analyseur de circonscription et un analyseur de dépendances ? Quels sont les différents usages des deux?

114 parsing nlp

2

Java ou Python pour le traitement du langage naturel [fermé]

Fermé . Cette question est basée sur l'opinion . Il n'accepte pas les réponses actuellement. Vous souhaitez améliorer cette question? Mettez à jour la question afin de pouvoir y répondre avec des faits et des citations en éditant ce message . Fermé il y a 6 ans . Améliorez cette …

112 java python nlp

21

Comment faire une racine ou une lemmatisation de mots?

J'ai essayé PorterStemmer et Snowball, mais les deux ne fonctionnent pas sur tous les mots, il en manque certains très courants. Mes mots de test sont: "les chats qui courent ont couru les communautés communautaires de cactus cactus cactus ", et les deux ont moins de la moitié raison. Voir …

111 nlp stemming lemmatization

4

Comment calculer la précision, le rappel, l'exactitude et le score f1 pour le cas multiclasse avec scikit learn?

Je travaille sur un problème d'analyse des sentiments, les données ressemblent à ceci: label instances 5 1190 4 838 3 239 1 204 2 127 Donc mes données sont déséquilibrées puisque 1190 instancessont étiquetées avec 5. Pour la classification Im utilisant le SVC de scikit . Le problème est que …

109 python machine-learning nlp artificial-intelligence scikit-learn

3

Comment entraîner le Stanford Parser avec Genia Corpus?

J'ai quelques problèmes pour créer un nouveau modèle pour Stanford Parser. J'ai également téléchargé la dernière version de Stanford: http://nlp.stanford.edu/software/lex-parser.shtml Et ici, Genia Corpus en 2 formats, xml et ptb (Penn Treebank). Standford Parser peut s'entraîner avec des fichiers ptd; puis j'ai téléchargé Genia Corpus, car je veux travailler avec …

93 java nlp stanford-nlp

23

Comment puis-je préfixer correctement un mot avec «a» et «an»?

J'ai une application .NET où, étant donné un nom, je veux qu'il préfixe correctement ce mot avec "a" ou "an". Comment pourrais-je faire ça? Avant de penser que la réponse est simplement de vérifier si la première lettre est une voyelle, considérez des phrases comme: une erreur honnête une voiture …

93 c# nlp linguistics

18

Stanford Parser et NLTK

Est-il possible d'utiliser Stanford Parser dans NLTK? (Je ne parle pas de Stanford POS.)

90 python parsing nlp nltk stanford-nlp

3

Existe-t-il une bonne bibliothèque de traitement du langage naturel [fermé]

Dans l'état actuel des choses, cette question ne convient pas à notre format de questions-réponses. Nous nous attendons à ce que les réponses soient étayées par des faits, des références ou une expertise, mais cette question suscitera probablement un débat, des arguments, un sondage ou une discussion approfondie. Si vous …

90 java nlp

Questions marquées «nlp»