Le Natural Language Toolkit est une bibliothèque Python pour la linguistique informatique.
Je lis ce livre ( NLTK ) et c'est déroutant. L'entropie est définie comme : L'entropie est la somme de la probabilité de chaque étiquette multipliée par la probabilité logarithmique de cette même étiquette Comment puis-je appliquer l' entropie et l'entropie maximale en termes d'exploration de...
Lorsque vous essayez de charger le punkttokenizer ... import nltk.data tokenizer = nltk.data.load('nltk:tokenizers/punkt/english.pickle') ... un a LookupErrorété soulevé: > LookupError: > ********************************************************************* > Resource
Comment trouver une liste avec toutes les balises POS possibles utilisées par le Natural Language Toolkit
Je cherche un moyen de diviser un texte en n-grammes. Normalement, je ferais quelque chose comme: import nltk from nltk import bigrams string = "I really like python, it's pretty awesome." string_bigrams = bigrams(string) print string_bigrams Je suis conscient que nltk ne propose que des bigrammes...
Je veux vérifier dans un programme Python si un mot est dans le dictionnaire anglais. Je pense que l'interface nltk wordnet pourrait être la solution, mais je n'ai aucune idée de comment l'utiliser pour une tâche aussi simple. def is_english_word(word): pass # how to I implement is_english_word?...
Quand dois-je utiliser chacun? Aussi ... la lemmatisation NLTK dépend-elle des parties du discours? Ne serait-ce pas plus précis si c'était le
Je commence tout juste à utiliser NLTK et je ne comprends pas très bien comment obtenir une liste de mots à partir d'un texte. Si j'utilise nltk.word_tokenize(), j'obtiens une liste de mots et de ponctuation. Je n'ai besoin que des mots à la place. Comment puis-je me débarrasser de la ponctuation?...
J'ai donc un ensemble de données que je voudrais supprimer des mots vides d'utilisation stopwords.words('english') J'ai du mal à utiliser cela dans mon code pour simplement supprimer ces mots. J'ai déjà une liste des mots de cet ensemble de données, la partie avec laquelle je me bats est de...
Dans le script shell, je vérifie si ces packages sont installés ou non, s'ils ne sont pas installés, installez-le. Donc avec le script shell: import nltk echo nltk.__version__ mais il arrête le script shell à la importligne dans le terminal Linux a essayé de voir de cette manière: which nltk ce...
J'ai du mal à utiliser pip pour installer presque tout. Je suis nouveau dans le codage, alors j'ai pensé que c'était peut-être quelque chose que j'avais mal fait et j'ai choisi de ne pas utiliser easy_install pour obtenir la plupart de ce dont j'avais besoin, ce qui a généralement fonctionné....
Mon code: import nltk.data tokenizer = nltk.data.load('nltk:tokenizers/punkt/english.pickle') Message d'erreur: [ec2-user@ip-172-31-31-31 sentiment]$ python mapper_local_v1.0.py Traceback (most recent call last): File "mapper_local_v1.0.py", line 16, in <module> tokenizer =
Je suivais un tutoriel qui était disponible dans les parties 1 et 2 . Malheureusement, l'auteur n'a pas eu le temps pour la dernière section qui impliquait d'utiliser la similitude cosinus pour trouver réellement la distance entre deux documents. J'ai suivi les exemples de l'article à l'aide du...
Est-il possible d'utiliser Stanford Parser dans NLTK? (Je ne parle pas de Stanford POS.)