問題 No.1168
自然言語処理において、大量のテキストデータを学習し、単語の意味や文脈上の類似性を考慮して高次元のベクトルとして表現する技術を【 】と呼ぶ。この手法により、「王様」のベクトルから「男」を惹き、「女」を足すと「女王」に近づくといった、単語間の意味的な演算が可能になった。
【正解の解説】
word2vec
Word2Vecは、単語を数値のリスト(ベクトル)に変換し、似た意味の単語を空間上で近くに配置する技術です。単語同士の足し算や引き算による意味的な操作が可能になります。
スポンサーリンク
【その他の選択肢の解説】
TF-IDF
TF-IDFは、単語の出現頻度をもとに、その単語がどれだけ文書の特徴を表しているかを統計的に計算する手法です。
形態素解析
形態素解析は、文章を意味を持つ最小単位の単語に分解する技術です。
ワンホットベクトル
ワンホットエンコーディングは、単語を0と1の組み合わせだけで表現する手法で、単語同士の意味的な関係性までは表現できません。