AIF生成AIの基礎
医療情報スタートアップが、患者の症状に関する質問にAmazon Bedrockで自動回答するシステムを構築しました。テスト中に、実際には存在しない薬の名称を本物の薬のように自信を持って記述する事例が複数発生しました。このようなLLMの挙動を表す用語として正しいものはどれですか?
Aオーバーフィッティング(過学習): 訓練データに過剰適合し、未知データへの汎化性能が低下する現象
オーバーフィッティングは訓練データへの過剰適合により未知データへの汎化性能が下がる問題であり、存在しない薬名を自信を持って生成するハルシネーションとは異なる概念です。
Bハルシネーション(幻覚): 事実と異なる情報や存在しない情報をLLMが事実として自信を持って生成する現象
✓ 正解
LLMは確率的にテキストを生成するため、学習データに存在しない情報(架空の薬名など)を事実であるかのように出力することがあります。この現象をハルシネーション(幻覚)と呼びます。
Cコンセプトドリフト: 本番環境のデータ分布がトレーニング時と乖離し、モデル性能が時間経過で低下する現象
コンセプトドリフトは入力データの統計的性質が時間とともに変化しモデルの予測精度が低下する問題であり、LLMが誤情報を生成するハルシネーションとは異なる現象です。
Dプロンプトインジェクション: 悪意のある指示をプロンプトに埋め込んでLLMの動作を意図的に操作する攻撃手法
プロンプトインジェクションは攻撃者が悪意ある指示をプロンプトに混入してモデルを操作する手法であり、モデル自身が誤情報を生成するハルシネーションとは全く別の問題です。
解説
大規模言語モデル(LLM)は、学習データのパターンに基づいて確率的にテキストを生成するため、事実と異なる情報や存在しない情報を、まるで事実であるかのように自信を持って出力することがあります。この現象を「ハルシネーション(幻覚)」と呼びます。
ハルシネーションは存在しない薬名・企業名・引用文献などを実在するかのように生成する形で現れます。医療・法律・金融など正確性が求められる分野では特に危険であり、RAGシステムの導入や人間によるレビュープロセスの追加が有効な対策です。
選択肢Aのオーバーフィッティング(過学習)は機械学習モデルが訓練データに過剰適合する問題であり、LLMが虚偽情報を生成するハルシネーションとは別の概念です。
選択肢Cのコンセプトドリフトは本番環境でのデータ分布の変化によってモデル性能が低下する現象であり、誤情報生成の問題とは異なります。
選択肢Dのプロンプトインジェクションは外部からの悪意ある指示でLLMの動作を操作する攻撃手法であり、LLM自身が内部的に誤情報を生成するハルシネーションとは別の問題です。
ドメイン別正答率・予想スコアでリアルタイムに実力把握
無限ノックでAIFを徹底対策。全問AI生成のオリジナル問題。
無料で演習を始める →