問題 No.1645
自然言語処理において、文章を単語の連続する列として分割し、その頻度や出現パターンをベクトル化して特徴量とする手法は何ですか?
【正解の解説】
Bag-of-n-grams
BoWを拡張し、単語の文脈や語順の情報を部分的に保持できるため、意味の解釈に寄与します。
スポンサーリンク
【その他の選択肢の解説】
BoW(Bag-of-Words)
単語の出現順序は考慮されず、単語の頻度情報のみを特徴量として利用します。
Word2Vec
単語の近接関係から意味の近さを捉えることができ、単語の加減算などの操作が可能です。
TF-IDF
特定の文書内での単語の重要性を強調し、頻出するが無意味な単語の影響を抑えます。