AI学習

AIの回答をファクトチェックする3ステップ、間違いを見抜く確認の習慣を営業職が整理

こんにちは、ヒロです。AIの回答が自信たっぷりに書かれていると、つい「そうなんだ」と信じてしまいませんか。

自分も、AIが出した数字をそのまま資料に載せかけて、上司に「その数字の出典は?」と聞かれ、冷や汗をかいたことがあります。調べてみると、数字が違っていました。

それ以来、AIの回答を使う前に、確認する習慣をつけました。この記事では、その3つのステップをまとめます。

結論:AIの回答は「数字・固有名詞・日付」の3点だけ、必ず裏取りする

結論から言うと、AIの回答を仕事に使うときは、数字、固有名詞、日付の3点だけは、必ず別の情報で確かめるのが、効率のよい確認方法です。

書類に印を付けて確認する女性

この記事でわかるのは、確認の3ステップ、間違えやすい場面、確認しなくてよい場面の見分け方です。

確認の3ステップ

自分が毎回やっている流れを、表にしました。

ステップ やること 具体例
1 チェック箇所に印 数字・固有名詞・日付に線を引く 金額、会社名、法律名、発表日
2 公式情報で確認 公式サイトや公的資料で探す 官公庁、企業の発表ページ
3 合わなければ直す AIに間違いを指摘して、再確認 「この数字は公式と違う」と伝える

大切なのは、確認を「AIに聞き返す」だけで終わらせないことです。AIは、同じ間違いを、もっともらしく繰り返すことがあります。

必ず、人間が書いた公式の情報にあたります。

間違えやすい場面

自分の経験では、次のような場面で、間違いが多いと感じています。

  • 最近のニュースや、制度の変更
  • 細かい数字(売上、割合、年号)
  • 法律・税金などの専門的な決まり
  • 実在するかどうかわからない本や論文の名前

特に、実在しない出典をもっともらしく作ってしまうことがあります。リンクや書名を出されたら、本当に存在するかを、必ず自分で検索します。

AIが間違える理由は、AIが「幻覚(ハルシネーション)」を起こす理由でまとめています。

自分がやってしまった失敗談

営業資料に、市場の規模を示す数字を載せるとき、AIが出した数字をそのまま使いかけました。念のため公式の統計を探したところ、年が違う数字でした。

もしそのまま出していたら、お客様の前で恥をかくところでした。それ以来、資料に載せる数字は、例外なく出典を添えるようにしています。

出典を添える習慣は、AIを使わない場合でも、資料の信頼を高めてくれます。

確認しなくてよい場面と、手間を減らす工夫

すべてを確認していると、AIを使う意味が薄れてしまいます。アイデア出しや、文章の言い換え、構成案のように、事実が問われない場面では、確認は軽くてかまいません。

手間を減らすために、自分は、AIに「この回答の中で、確認が必要な事実を、リストにして」と頼みます。確認する箇所の洗い出しをAIに任せ、裏取りは自分でやります。

ChatGPTのプロンプトの書き方にもあるように、頼み方を工夫すると、確認の負担は軽くなります。

公式情報の探し方

裏取りに使う情報は、官公庁の統計や、企業の公式発表など、発信元がはっきりしているものを選びます。まとめサイトや個人のブログは、参考にはなっても、根拠にはしません。

検索するときは、AIの回答に出てきた数字や固有名詞を、そのまま検索窓に入れます。公式のページが上位に出てきたら、そこで確認します。

見つからないときは、その情報は使わない、と決めています。確認できないものを資料に載せない。このルールだけで、ミスはぐっと減ります。

確認を習慣にするための、小さなルール

自分は、資料のフォルダに「確認済みリスト」というメモを作り、数字と出典を一行ずつ書いています。後から聞かれたとき、すぐに答えられるので安心です。

このリストがあると、上司や取引先に「その数字はどこから?」と聞かれても、慌てずに済みます。

よくある疑問

Q:どのAIが一番正確ですか。

A:サービスやバージョン、質問内容によって変わります。どのAIでも、重要な事実は確認する前提で使うのが安全です。

Q:AIに「出典を示して」と頼めば安心ですか。

A:安心ではありません。出典自体が間違っていることもあるので、必ず自分で存在を確かめてください。

Q:確認に時間がかかりすぎるときは。

A:確認する箇所を、数字・固有名詞・日付に絞ってください。それ以外は、軽く見るだけにします。

Q:ファクトチェックを習慣にするコツはありますか。

A:資料に出典を書く欄を作ると、自然に確認する流れになります。

まとめ

AIの回答は、数字・固有名詞・日付の3点を、公式情報で裏取りするだけで、間違いを大きく減らせます。

自分は、確認を習慣にしてから、AIの便利さを安心して使えるようになりました。まず次の資料で、数字に出典を1つ添えてみてください。

AIを使いこなすためのコツは、ほかの記事でも紹介しています。

-AI学習