問題 No.506
「エンコーダ」で入力文を圧縮し、「デコーダ」でそれを別の言語や形式の系列に変換する、翻訳等に用いられるモデル構造はどれか。
【正解の解説】
Seq2Seq
sequence-to-sequence(Seq2Seq)は、入力系列を一つの圧縮された情報に変え、それを基に別の系列を出力する翻訳機の基本構造です。エンコーダとデコーダの二段構えになっています。
スポンサーリンク
【その他の選択肢の解説】
Transformer
Transformerは、sequence-to-sequenceの構造をより発展させ、Attentionという仕組みで文脈の理解を格段に上げた現在の主流モデルです。
BERT
BERTは、文章の文脈を深く理解するための学習モデルで、主に文章分類や単語の意味解釈に使われ、翻訳専用の構造とは少し異なります。
オートエンコーダ
オートエンコーダは、入力を圧縮して元の姿に戻すことを通じて、重要な特徴を学習するための仕組みであり、必ずしも翻訳のための構造ではありません。