2021-07-23から1日間の記事一覧
■基本の使い方: Tokenizerをインポート Tokenizerオブジェクトのインスタンスを生成 tokenize()メソッドに対象の文字列を渡す →tokenize()メソッドはTokenオブジェクトのジェネレータを返す from janome.tokenizer import Tokenizer t = Tokenizer() token_…
■基本の使い方: Tokenizerをインポート Tokenizerオブジェクトのインスタンスを生成 tokenize()メソッドに対象の文字列を渡す →tokenize()メソッドはTokenオブジェクトのジェネレータを返す from janome.tokenizer import Tokenizer t = Tokenizer() token_…