CV・NLPハマりどころメモ

画像認識と自然言語処理を研究する中でうまくいかなかったことと、その対策をまとめる自分用メモが中心。

gensim

gensimで英語の分かち書き[gensim][Python]

from gensim.utils import tokenize list(tokenize("i am happy")) >> ['i', 'am', 'happy']