CV・NLPハマりどころメモ

画像認識と自然言語処理を研究する中でハマったところを共有します.ほぼ自分用のメモ.

gensim

gensimで英語の分かち書き[gensim][Python]

from gensim.utils import tokenize list(tokenize("i am happy")) >> ['i', 'am', 'happy']