Existe-t-il des outils shell Unix pour calculer diverses statistiques de mots sur des fichiers?

Question

Pas ceux de base (comme wc) ... J'ai besoin d'outils pour construire des nuages ​​de tags, calculer la distance sémantique entre fichiers, extraire un dictionnaire de mots d'un fichier, etc

Answer 1

C'est une question ... Avez-vous regardé NLTK. C'est une bibliothèque open source, écrite en Python, qui fournit de très nombreuses primitives de traitement en langage naturel. Cela ne fonctionnerait pas "out of the box" ("un peu d'assemblage requis ;-)) mais permettrait toute personnalisation que vous pourriez exiger."