生成AIパスポート試験 LLM・プロンプト実践 練習問題 第3問: ニューラル言語モデルが、単純なn-gramの数え上げと異なる点として最も適切なものはどれか。

正解: 4. 語の分散表現とニューラルネットワークを学習する

語の分散表現とニューラルネットワークを学習し、確率推定に用いることがニューラル言語モデルの特徴である。「文法規則を人手で記述」するのはルールベースの手法で学習モデルではなく、「文字数だけ」では語順を扱えない。「直前のn-1語の出現回数を数える」のはn-gramモデルそのものの方法で、ニューラル言語モデルは分散表現によって似た文脈へ一般化する。

関連キーワード: ニューラル言語モデル・分散表現・ニューラルネットワーク