AIVEST

無料PDF資料

生成AI ハルシネーション対策 事実検証チェックシート

生成AIの出力を「注意して使う」で終わらせないための記入式チェックシート。疑うべき主張(数字・固有名詞・仕様・日付)の切り出し、一次情報での確認と時点の明記、確認できない数字は使わない判定、機械検査と別のAIに反証させる最小構成、公開後24時間の人間レビューと検査項目への昇格までをまとめました。

生成AI ハルシネーション対策 事実検証チェックシート

この資料に含まれるもの

  • ステップ1|疑うべき主張を切り出す——数字・固有名詞・仕様・日付の4種類に印を付けるチェックと、全数の調べ直しにしないための絞り込み
  • ステップ2〜3|主張台帳——主張・一次情報(公式サイト・原文)・確認時点・判定(確認済/削除/未確認と明記)を6件まで書き込める記入表と、時点の明記・確認できない数字は使わない・AIが挙げた出典を実際に開く、の3チェック
  • ステップ4-A|機械検査にかける——禁止語・数字の出典と時点・確認済み数字の台帳・自社規格の4項目を毎回同じ基準で検査するチェック(1つでも落ちたら公開・提出に進めない)
  • ステップ4-B|AIの出力をAIに疑わせる最小構成——書いたAIとは別の新しいチャットに与える3つの指示文と、自己弁護を避ける・最後に公式サイトを開いて確定するのは人間、の分担チェック
  • ステップ5|公開・提出後の人間レビュー——24時間以内の通し読みの担当と時刻、見つけた事故・違和感、次回から検査リストに昇格させる項目の記入欄
  • 記入が終わったら——「確認できない数字は使わない」を全員のルールにする、対策プロンプトとRAGは前段に置く、社内ルール雛形と再発防止シートへの接続、AIVESTブログの「書かない」運用実例

本資料は、株式会社AIVESTが自社で実践している手順をまとめたものです。内容についてのご質問や、自社に合わせた進め方のご相談はお問い合わせからどうぞ。