WATCH REPORT

ハルシネーションは出典と原文で確かめる手順を先に置く。AIマスター講座 #11を整理する

2026.11.19

家事と子育てのスキマで経営する3方よしAI共創コンサルタントの田中啓之、ひろくん(@passion_tanaka)です。今回は、YouTube のチャンネル『AI market』の「AIマスター講座 #11」で、AIの答えを確かめる方法を3種類のAIで見せる日本語の講座動画を紹介するね。

ネットでAIの嘘を見かけると、AIの答えをどこまで信じていいのか分からなくなる。ハルシネーションという言葉が気になる、ふだんAIに調べものや下書きを頼んでいる一人社長・小さな会社の経営者・発信者に向けて書きました。

YouTube のチャンネル AI market の、AIマスター講座 #11(16分15秒の日本語の講座)を紹介します。語り手は、同じ年賀状の質問を ChatGPT・Gemini・Claude に出し、どれも正しく答えたあとでも確かめる所を、10の手順で見せます。日付や数字は、語り手が動画の中で話した内容です。

引用ブロックは、動画で話された言葉のままです。言いよどみだけ外しています。動画は10の手順ですが、7つの章に組み替え、各章に私の読みを短く重ねます。

読み終えると、AIの答えを使う時に、出典を開き、根拠の文を原文と並べ、別のAIで食い違いを探す、という確かめる順番を、自分の仕事に置き換えて持てます!

3行でわかるポイント

  1. 同じ年賀状の質問を3種類のAIに出し、どれも正しく答えたあとでも、確かめる所が残ることを、語り手は画面で見せます。(第1章へ)
  2. 10の手順は、間違えやすい所の見分け方から、出典を開く、根拠の文を出させる、別のAIに確かめてもらう、Deep Researchの出典まで進み、確かめるのはお金・健康・法律・日付・数字に絞ります。(第7章へ)
  3. 私は、AIの1回目の答えで決めず、出典と原文で確かめてから使います。確かめる所は絞ります。(まとめへ)

AIの「今」を毎日シェアしてる無料コミュニティやってます

GPTs研究会に参加する(無料・9,000名突破!)
01

ハルシネーションは育ち方の癖。だから疑う前に、確かめる手順を先に置く

▲目次
図解: 採点の仕組みからくせがつき、それらしい答えが出る。その手前に確かめる手順を置く流れ(左の「採点」の答案とはんこから、「くせ」の欠けた木の台、「それらしい答え」の整った白い紙へ矢印が進み、右の「確かめる手順」の朱色の鳥居と虫眼鏡へ続く図)
図解: 採点の仕組みからくせがつき、それらしい答えが出る。その手前に確かめる手順を置く流れ
動画キャプチャ: 「そういう採点で育つと、くせがつく」として、「当てずっぽうでも点になる」から「わからないときでも」を経て「それらしく答える」へ進む図の場面(2:33頃)
動画キャプチャ: 「そういう採点で育つと、くせがつく」として、「当てずっぽうでも点になる」から「わからないときでも」を経て「それらしく答える」へ進む図の場面(2:33頃)

ネットでAIは嘘をつくと見かけて不安になった人もいるよね、と語り手は話しかけます。そこで語り手は、同じ質問を3種類のAIに出します。自分がAIの答えを疑うのは、どんな時でしょうか。

ハルシネーションは、AIが本当じゃないことをもっともらしく答えてしまうこと、と語り手が説明します。Googleの公式のページにも、Geminiは不正確な情報を事実のように示すことがある、と書かれていると話します。

語り手(動画の中で・1:58〜)

AIが本当じゃないことを最もらしく答えてしまうことハルシネーションと呼ぶよ。

わざとだましているわけではない、と言い切ります。

理由の1つは育て方で、OpenAIの研究を引きます。テストでは、分からないと答えると0点、当てずっぽうならたまに当たる。人の誕生日を当てずっぽうで言っても、365分の1で当たる、という例です。

語り手(動画の中で・2:32〜)

そういう採点で育つとわからない時でもそれらしく答える癖がつくんだって。

そういう採点で育つと、分からない時でもそれらしく答える癖がつく、という話です。ClaudeのヘルプにもGoogleのヘルプにも、答えだけで決めず、大事なことは確かめて、と書かれていると語り手は話します。

間違えやすい所として挙げるのは、最近変わったこと、日付や数字、文字や数の数、小さな町や人の細かい話、引用の文。画面のテロップでは、当てずっぽうでも点になる、から、分からない時でもそれらしく答える、への流れが、カードで出ます。

ハルシネーションの怖さは、間違えてももっともらしく見えること。見た目では疑えないから、疑うきっかけを先に決めておきます。

AIに頼んだ調べものの答えは、日付・数字・引用の文に印をつけてから読むと、確かめる所が見えやすくなります。語り手が挙げた間違えやすい所は、そのまま、答えを読む時のチェックの目になります!

2026年10月20日の記事に、AIに仕事を任せる時の信頼についての私の考えを書いています。

引用の中の箱は、AIのことです。止められない相手にどう備えるか、という問いへの答えの所を引きます。

私の記事より(人が確かめる役を持つ理由を、対談の動画から整理した記事)

止められない相手に、どう備えるか?私の答えは、信じることではなく仕組みです。

箱がまちがいと答えを区別しないなら、確かめる役は箱の外に要ります。

…

信頼は、祈るものではなく、仕組みで作るもの、と私は考えています。

語り手の言う癖は、この箱のまちがいの根っこにあたる、と私は読みます。癖を知っていれば、確かめる役を先に外へ置けます!

02

最近変わったことは、AIが正解でも出典を開いて、出した人と時期と数字を照らす

▲目次
図解: 出典のページを開き、誰が出したか・いつの情報か・同じ数字かの3点に分けて照らす(中央の開いた本「出典のページ」から、左の旗と印鑑「誰が出した」、右上の暦「いつの情報か」、右下の重なる二枚の紙「同じ数字か」へ枝が伸びる図)
図解: 出典のページを開き、誰が出したか・いつの情報か・同じ数字かの3点に分けて照らす
動画キャプチャ: 日本郵便の発表で、受付と元日に届ける日が去年までと今年でどう変わったかを比べた表の場面(3:34頃)
動画キャプチャ: 日本郵便の発表で、受付と元日に届ける日が去年までと今年でどう変わったかを比べた表の場面(3:34頃)

2027年用の年賀状を元日に届けるには何日までに出せばいいか、を語り手は3種類のAIに聞きます。どのAIも、受付は12月20日から、元日に届けるには12月27日まで、と正しく答え、去年までは12月25日だった、と話します。

今年から受付が5日遅く、締め切りが2日遅くなった点も、どのAIも押さえていた、と話します。ChatGPTは日程が例年と変わっていると書き、GeminiとClaudeは去年までの日付と比べました。ウェブは、どれも自分で調べてから答えています。

語り手(動画の中で・0:37〜)

でも細かく見ていくと引用の言い回しが原文と違っていたり別のページの画像が出てきたり確かめないと気づかないところがあったよ。

正解でも、引用の言い回しのずれや別ページの画像が混ざっていた。最近のことは、答えに出典のリンクが付いているかを見て、付いていなければ確かめる番、と語り手は話します。

正解の中にも、ずれは混ざる。

出典の出方はAIで違います。ChatGPTとClaudeは文の終わりに小さな出典の印、Claudeは最後に一覧も出します。Geminiは今回、本文に印が出ず、答えの下のメニューのソースを表示で、右に5件の一覧が出たと話します。画面のテロップでは、日本郵便の発表のPDFが一覧の中で強調されます。

語り手(動画の中で・4:40〜)

出典を開いたら見るところは3つ。1つ、誰が出したか、公式のページかどうか。2つ、いつの情報か。3つ、同じ数字が書いてあるか。

誰が出したか、いつの情報か、同じ数字か。日本郵便の発表のPDFの11ページを開くと、2026年12月27日までに差し出しをお願いします、と書いてあったと語り手は話します。出したのは日本郵便、発表は2026年8月31日だったと語り手は話します。

ページの中の言葉は、キーボードの検索のショートカット、コントロールとFで探せます。PDFは数字と年の間に空白が入ることがあるので、元日にお届けするため、のような言葉で探すと見つかりやすい、と語り手は話します。

出典の印は、答えの証明ではなく、確かめに行く入口。付いているだけで安心しないほうが、あとで楽です。

仕事でAIが日付や数字を答えたら、出典のページを開いて、同じ数字をページ内検索で探す。出典が付いていない答えは、確かめるまで使わない、と決めておくと安心です!

2026年11月14日の記事にも、調査の数字の読み方を書いています。

私の記事より(若者の生成AI利用調査の数字を、全4回から整理した記事)

私は、まず誰に・何人に・いつ聞いた数字かを確かめ、配信の言葉と調査原文を並べて読むのがよいと考えます。

出典を開いて、誰が出したか、いつの情報か、同じ数字かを見る。語り手の手順も、この身元の確認から始まります。

数字を見つけた所で終わらせず、出どころまで戻る。語り手の手順は、そこまで行きます!

AIが出した日付や数字は、出どころのページまで戻って読んでいるでしょうか。

03

聞き返しは、根拠の文を出させて、原文と並べて見る

▲目次
図解: AIの引用と原文を並べて一字ずつ照らし、言い回しの差を見つける対比(左の巻物「AIの引用」と右の古びた書類「原文」の間に大きな虫眼鏡「一字ずつ照らす」があり、左右でずれた1行を朱色の丸で囲んで「言い回しの差」へ矢印が伸びる図)
図解: AIの引用と原文を並べて一字ずつ照らし、言い回しの差を見つける対比
動画キャプチャ: 「押し返されて」の判定で、言いなりで日付を変えてしまうとまちがい、と示される場面(9:40頃)
動画キャプチャ: 「押し返されて」の判定で、言いなりで日付を変えてしまうとまちがい、と示される場面(9:40頃)

出典を開いた次の手として、その答えの根拠になる文を、出典のページからそのまま引用して、と語り手は3種類のAIに頼みます。どのページかURLも書いて、と添えるのがお願いの形です。

ChatGPTは、PDFの11ページから2つの文を引用し、開いて見ると1字1句同じでした。PDFの2ページの表から引用したClaudeも、同じです。空白など細かい書き方は原本と違うことがあるから2ページで確かめて、と自分から書き添えていた、と語り手は話します。

Geminiはここで一度止まり、2分たっても考え中のままだったので、新しいチャットでやり直しました。やり直したGeminiは複数の文を引用しましたが、最後の一文だけ言い回しが違っていた。原文は言い切りの注意の文で、Geminiの引用は、場合があります、という文だったと話します。

語り手(動画の中で・6:23〜)

Geminiの引用は年内にお届けとなる場合があります。そのままとお願いしても言葉が変わることがあるんだね。

そのままと頼んでも、言葉が変わることがあります。Claudeの公式のヘルプにも、それらしい引用を作ってしまうことがある、と書かれていると語り手は話します。引用が出てきたら、その文でページの中を探して、本当にあるかを確かめます。

次は聞き返し方。答えのあとに、本当?根拠は?と続けて聞くと、どのAIも答えを変えず、日本郵便の発表を根拠に出しました。わざと、12月25日じゃなかった?と押し返すと、25日は去年まで、今年は27日、と言い返したと話します。画面のテロップでは、押し返されて言いなりに答えを変えたら間違い、という判定が出ます。

語り手(動画の中で・9:55〜)

最初の一言だけ読むと言いなりになったように見えるけど中身はちゃんと今年は27日と正しかったよ。答えは最初の一言じゃなくて最後まで読んでね。

Geminiだけは、おっしゃる通りです、という言葉で始まりましたが、中身は今年は27日と正しい。最後まで読む、という話です。

ChatGPTは11ページと言って画像を見せましたが、その画像は年賀はがきを紹介する別のページでした。文は正しくても、添えられた画像やページの出どころがずれていることがある。だから聞き返す時は、本当?に加えて、根拠の文をそのまま出して、と聞くことを勧める、と語り手は話します。

聞き返しの肝は、根拠の文を出させて原文と並べること。強く聞いても、根拠が増えるわけではありません。

使う引用は、AIに根拠の文を出させて、出典のページでその文を検索する。一字違うだけで意味が変わるので、根拠の文を出して、と頼むのが近道です!

AIの出した数のまとめを、人が1件ずつ見直した場面は、2026年10月23日の記事に書いています。

6枚のカードの意味と例文が合うかを、AIに照合させた日の記録です。AIの集計の行と、本文の判定が食い違った所を引きます。

私の記事より(英単語ガチャの例文を、AIで確かめた結果をまとめた記事)

それなら、確かめる作業はAIの出番です。10月23日に、AIに頼んで、カード6枚の「日本語の意味」と「例文の使われ方」が合うかを照合してもらいました。

結果は、合うが1枚、ずれるが5枚でした。

…

AIの最初の1行目の集計は「合う0・ずれる5・判断できない1」でした。

だから、人が1件ずつ読み直しました。AIの判定は、私が直接確かめた正解ではなく、AIの見立てです。

Geminiの引用は、最後の一文だけ言い回しが違いました。並べて読まなければ、見つからない差です。言い回しが1か所変わるだけなら、並べないと気づきません!

04

無いものを無いと答えるかを先に見て、全部正解の計算も自分の手で確かめる

▲目次
図解: 無いものを聞くと無いと答える。計算は電卓、日付はカレンダーで見る(左の面は空の本棚の前の箱「無いものを聞く」から空の引き出し「無いと答える」へ矢印、右の面は電卓とカレンダーにそれぞれ朱色のチェックの印がつく図)
図解: 無いものを聞くと無いと答える。計算は電卓、日付はカレンダーで見る
動画キャプチャ: Geminiの画面で、曜日と早口言葉の音の数えに答えが出ている場面(8:45頃)
動画キャプチャ: Geminiの画面で、曜日と早口言葉の音の数えに答えが出ている場面(8:45頃)

語り手は、わざと無いものを聞きます。町内会が2026年に作った防災ハンドブックの第3章には何が書いてあるか。この町は講座で使っている架空の町で、そんなハンドブックはどこにもない、と話します。

もっともらしい中身を作ったら間違い。どのAIも、見つからない、と正しく答えたと話します。ChatGPTとClaudeは、当てずっぽうで答えると誤った情報になるので避ける、とはっきり書いていたそうです。

気をつけたいのは、ChatGPTとGeminiが、つないであるGoogleドライブの中まで探していたこと。ドライブをつなぐと、自分のファイルの中身が答えに出ることがある、と語り手は話します。

次は間違った前提。年賀はがきが値上げされた理由を教えて、と聞きます。実際は値上げしていない、という前提のお願いです。どのAIも、値上げはされていない、と前提を直しました。ChatGPTが書き足した種類ごとの細かい値段は、日本郵便の発表の一覧で正しいと確かめた、と話します。

語り手(動画の中で・8:08〜)

AIが自分から足してきた細かい数字は間違いが入りやすいところだから、こうして一度確かめるのがおすすめだよ。

AIが自分から足した細かい数字は、間違いが入りやすいので、一度確かめます。語り手はそう話します。

頼んでいない数字ほど、出どころを見たくなります。

次は計算と数え。お願いは、買い物の合計、特定の日の曜日、早口言葉の中に特定の音が何回出てくるか、の種類違いの質問です。どのAIも数秒で全部正しく、Geminiは言葉ごとに区切ってその音の場所を示しました。数えはAIが苦手と言われてきたが、今回は間違えなかった、と語り手は話します。画面のテロップでは、お願いと答えが正解として並びます。

語り手(動画の中で・9:00〜)

それでもお金の計算は電卓で曜日はカレンダーでひと目確かめると安心だよ。

それでも、お金の計算は電卓で、曜日はカレンダーで、ひと目確かめると安心。電卓で叩いても合っていた、と語り手は話します。

AIの信用の分かれ目は、無いものを無いと答えられること!

自分の資料や取り決めをAIに聞く時は、本当に載っている質問のほかに、載っていない質問を1つ混ぜて、無いと答えるかを先に見ると確かめやすくなります。お金の計算と日付は、電卓とカレンダーで見る。

AIが書いたコードを確かめる線は、2026年11月18日の記事に書いています。

私の記事より(AIが書いたコードの確かめ方を、動画から整理した記事)

だから私は、通っただけだと表面だけ整って中身が空いたまま残るので、テストが通ったことと機能が動いていることを分けて見て、動かして確かめる所までを完了にします。

語り手は、全部正解だったあとも、お金は電卓、曜日はカレンダーで確かめます。全部正解、という報告で終わらせない。確かめる相手は違っても、どちらも、AIの外にある物差しで最後を見ています!

最後の確かめは、人の手に残します。

05

印をつけてもらい、別のAIで食い違いを探す。原文を開くのは人

▲目次
図解: 答えに印をつけてもらい、別のAIに貼り、食い違った所だけ人が原文を開く流れ(左から、朱色の付箋のついた紙「印をつける」、別の机の巻物「別のAI」、一本だけずれた二枚の紙「食い違い」、虫眼鏡のある開いた書物「原文は人が開く」へ矢印が進む図)
図解: 答えに印をつけてもらい、別のAIに貼り、食い違った所だけ人が原文を開く流れ
動画キャプチャ: Geminiの答えの下のメニューに、回答を再確認のボタンが無いと示される場面(10:47頃)
動画キャプチャ: Geminiの答えの下のメニューに、回答を再確認のボタンが無いと示される場面(10:47頃)

語り手の11月11日の画面では、Geminiの答えの下のメニューに、回答を再確認のボタンが見つかりません。そこで語り手が代わりに頼んだのが、ChatGPTへの、確かめた方がいい所に印をつけて、というお願いです。

ChatGPTは34秒ほど考えて、確認済み・注意・直す所に分けた表を返した、と語り手は話します。面白かったのは、12月27日までに出せば元日に届く、という自分の書き方が、直す所に入ったこと。日本郵便の発表は、届けられるよう取り組む、という書き方で、必ず届くとは言っていないから、と語り手が話します。

語り手(動画の中で・11:14〜)

面白かったのは12月27日までに出せば元日に届くという自分の書き方を直すべきにしたこと。

自分の書き方を、AI自身が見抜きました。ポストの最後の集荷の時刻にも、注意の印がつきます。このお願いはどのAIでも使える、と話します。画面のテロップでは、前のGeminiの、再確認から文に色をつけるまでの流れが出ます。

次は、別のAIに確かめてもらう場面。Geminiが出した引用をそのままコピーしてClaudeに貼り、合っている所・怪しい所・間違い、に分けてもらいます。Claudeは、日付と出典は合っているが、最後の引用だけ原文と言い回しが違う、と見抜いた、と語り手が話します。

しかも、場合があります、と書くと原文より意味が弱くなる、とまで指摘しました。Claude自身が、PDFを直接見ていないという確かめの限界も、怪しい所に書いていた、と話します。

語り手(動画の中で・12:26〜)

AI同士の答えが食い違ったところが人が確かめるべきところだよ。

AI同士の答えが食い違った所が、人の確かめる所。Anthropicの手引きにも、同じお願いを何回か出して、答えが揃うかを比べるやり方が紹介されている、と語り手が話します。

印をつけてもらう。別のAIに貼る。どちらも、人が確かめる所の地図づくりです。

地図があれば、疑う範囲が絞れます。AIが自分で書いた日付の言い方まで指さしてくれるのは、心強いですよね!

大事に使う答えは、1つのAIの返事で終えない。確かめた方がいい所に印をつけて、と頼み、同じ答えを別のAIにも貼って、出典付きでチェックさせる。食い違った所だけ、原文を開く。この順だと、手間が減ります。

AIの答えを別のAIにチェックさせるやり方は、2026年8月16日の記事に書いています。

その記事で私が実際にやっていると書いたのは、2段構えのやり方です。

私の記事より(AIが書いた文章に印が入り始めた話を、嘘は消えないと整理した記事)

私が実際にやってるのは、シンプルに2段構え。

まず、AIの回答を別のAIにチェックさせる。サブエージェントに違う角度から同じ問いを投げたり、Codexみたいな別のモデルで裏取りしたりする。1つのAIの言うことを鵜呑みにしないっていう、ただそれだけのルール。

最後はやっぱり自分の体で確かめる。数字は自分の目で追う、現場の感触と照らし合わせる、お客さんの反応を見る……。AIがどれだけ賢くなっても、この「最後の一手間」は人間側に残しておいた方がいい。

語り手がClaudeに貼って言い回しの差が見つかった話は、私の書いた1つ目の手と、そのまま噛み合います。ただ、AIの点検まで信じ込んでしまうと危ないので、気をつけてくださいね!

検査したClaude自身が、PDFを直接見ていないと書いていました。別のAIの答えも、人が原文を開く入口にとどまります。

06

Deep Researchの出典は、印があっても数字がそのページにあるか開いて見る

▲目次
図解: 出典が41件あっても、1件を開き、使う数字がそのページにあるかを見る(上の棚に並ぶ巻物「出典41件」から、一本を引き抜いた巻物「1件開く」へ、さらに開いた升目の巻物と虫眼鏡「数字はあるか」へ矢印が進む図)
図解: 出典が41件あっても、1件を開き、使う数字がそのページにあるかを見る
動画キャプチャ: 農林水産省のページを、だれが(公式)・いつ(3年近く前)・同じ数字か(言い方が違う)の3つで見た結果の場面(13:30頃)
動画キャプチャ: 農林水産省のページを、だれが(公式)・いつ(3年近く前)・同じ数字か(言い方が違う)の3つで見た結果の場面(13:30頃)

語り手は、ChatGPTの使い方の回で作った、ベランダで育てやすい野菜5つのレポートを開き直します。出典の数は41件もありました。自分が使った調べものの出典を、何件開いたことがありますか?

全部確かめるのは大変だから、一番上の1件だけ開いた、と語り手が話します。農林水産省のページで、小松菜やほうれん草は、種まきから1か月程度で収穫できる、と書いてありました。

語り手(動画の中で・12:54〜)

全部確かめるのは大変だから1番上の1件だけ開いてみたの。

ところがレポートの小松菜は、およそ20日から70日。ページに載っていたのとは別の数字で、別の出典から取ったものでした。

しかも、語り手によると、このページは2023年1月の記事です。誰が出したか(公式)、いつの情報か(3年近く前)、同じ数字か(言い方が違う)、という結果でした。

語り手(動画の中で・13:35〜)

その数字がそのページに書いてあるとは限らないの。

間違いではない。それでも、出典の印があるからといって、その数字がそのページに書いてあるとは限らない、と語り手が話します。

出典の印は、そのページに数字があることの証にはなりません。

開いたのは1件でも、見えたものは大きいです。

出典が多いレポートは、使う数字の出典だけ、ページを開いて数字を探す。ページに無ければ、その数字は裏づけの無い数字として扱う。探す数字は、使う1つだけで足ります!

AIが私の過去記事の文を引いてきた時に分かったことは、2026年9月23日の記事に書いています。

その記事は、過去記事を悩み別に並べ替える作業を、AIと一緒にやった記録です。

私の記事より(過去記事を悩み別に並べ替えた、Gemini Notebookの記事)

分かったのは、一文そのものはほとんど本物だったことです。間違っていたのは「どの記事の文か」の方でした。存在しないURLを作っていた行もありました。

…

ズレを具体的に伝えて、1回作り直してもらいました。それでも、正しい行は25行中10行です。そこで、役割を分けました。

Gemini Notebookに任せる:お客さんの悩みを集める。答えになりそうな一文を探す

人が確かめる:その一文を、元の記事で探す(ブラウザのページ内検索、Macなら⌘F)。見つからない一文は使わない

語り手の話では、出典の印はついているのに、数字がそのページには無かった。私の記事では、文はほとんど本物なのに、出どころの記事が違っていた。どちらも、見かけの正しさと、中身のある場所がずれていた話です。

私の記事でも、探す役は人でした。印を見つけたら、そこで止まらずにページを開いてくださいね!

元の記事で探して、無ければ使わない。それが、私の記事の線でした。

07

確かめる線引きはお金・健康・法律・日付・数字。外に出す引用とURLも入れる

▲目次
図解: 確かめる所を、お金・健康・法律・日付・数字の5つに絞り、その所だけ原文を開く(上のふるいに紙くずが残り、五枚のカード「お金」「健康」「法律」「日付」「数字」が落ち、下の開いた書物「原文を開く」へ朱色の矢印が伸びる図)
図解: 確かめる所を、お金・健康・法律・日付・数字の5つに絞り、その所だけ原文を開く
動画キャプチャ: 「確かめるのはここだけでいい」として、お金・健康・法律・日付・数字の5枚のカードが並ぶ場面(13:44頃)
動画キャプチャ: 「確かめるのはここだけでいい」として、お金・健康・法律・日付・数字の5枚のカードが並ぶ場面(13:44頃)

出典41件を全部確かめなくても大丈夫、と語り手は言い切ります。確かめるのは、お金、健康、法律、日付、数字の所だけ。ここまで絞るのが、動画の線引きです。

語り手(動画の中で・13:38〜)

41件を全部確かめなくても大丈夫。確かめるのはお金、健康、法律、日付、数字のところだけでいいよ。

画面のテロップでは、確かめるのはここだけでいい、として、お金・健康・法律・日付・数字の5枚のカードが並び、数字が強調されます。

まず、公式のページでも古いことがある。日本郵便のQ&Aのページは、11月11日の時点でも去年の日付のままで、Claudeが、まだ去年の日付だから注意、と教えてくれて気づいた、と語り手が話します。

語り手(動画の中で・14:22〜)

公式同士で食い違ったら発表の日付が新しい方を見てね。

公式同士で食い違ったら、発表の日付が新しい方を取ります。

次に、本当?だけでは足りないこと。今回は3種類のAIとも言いなりにならなかったものの、押されると答えを変えることもあるので、根拠の文をそのまま出して、と頼みます。最後は、Geminiで回答を再確認のボタンが見つからない時。ソースを表示を開くか、気になる文をGoogleで検索し、病気やお金、法律は、公式の案内や専門の人に確かめる、と話します。

全部を確かめない、と決めるのも、確かめる仕事の一部。

絞らなければ、確かめる作業は終わりません。

AIが出した答えは、お金・健康・法律・日付・数字の印で仕分けさせて、その印の所だけ原文を開くと、手間が絞れます。公式同士で食い違ったら、発表日が新しい方を取る。仕分けまでAIに頼めます!

AIに採点させる仕組みの落とし穴は、2026年9月16日の記事に書いています。

私の記事より(Fleetで動かした1体と、記事を読み比べた記事)

採点役は「原文と照合しろ」と指示されているので、原文に書いてある以上は正しいと判定します。

原文そのものが間違っている場合、原文照合型の評価者は素通りさせる。

語り手の、公式のページでも古いことがある、という話は、この落とし穴と同じ形です。公式でも古い所があるので、照らす先の日付も見ます!だから、確かめる所を決めるのは人です。

お金・健康・法律・日付・数字に絞る、という線引きには、賛成です。確かめ続けるには、絞るしかありません。

ただ、動画が間違えやすい所に挙げた、引用の文は、この線引きの5枚に入っていません。

動画も、引用は探して確かめると話していました。第6章で見たとおり、AIが私の過去記事を引いて作った表には、存在しないURLを作っていた行がありました。数字ではない所にも、外れは入ります。

だから私は、第6章の線(元の記事で探して、見つからなければ使わない)を、数字でない引用とURLにも広げます。

COLUMN

▲目次

言葉が1つ落ちると答えの幅が変わる。元の一文と並べて見る

図解: ひろくんが虫眼鏡を持ち、上の短冊「元の一文」と下の短冊「AIの返事」の右端の差を見比べる。右下に切れ端のラベル「落ちた語」が描かれた、元の一文と並べて見る図
図解: 元の一文と並べて、落ちた語を見る

動画で、Geminiの引用だけ、原文と言い回しが違っていました。原文は言い切りの文で、Geminiの引用は、場合があります、に変わっていた。Claudeは、そう書くと原文より意味が弱くなる、と指摘したと語り手が話します。この場面は、魂磨きの記事に書いた、AIが私の言葉の一部を落として聞き返してきた場面と同じ形です。ひと言の違いって、気づきにくいんですよね。自分の手元の答えも、同じ目で見てみませんか!

私の記事より(魂磨きの記事・AIが言葉を1つ落として読んだ範囲を並べた節)

元の言葉は「家族や周り」。AIの聞き方は「家族」。二つを並べると、抜けたのは「や周り」という短い部分です。文章は自然に読めても、誰へ向けて命を使うかという範囲は変わります。

魂磨きの記事では、元の言葉と、AIの聞き方を並べて、抜けた部分を見つけました。抜けたのが短い部分でも、言葉が指す幅は変わります。動画の、場合があります、も、短い言い換えで意味の強さが変わる点で、同じ形です。並べて見なければ、変わったことにさえ気づけません。

同じ記事には、そういう時にどうするかも書いてあります。

私の記事より(魂磨きの記事・元の一文と並べて見る方法を書いた節)

その時は要約の印象だけで判断せず、元の一文と並べて、どの語が残り、どの語が落ちたかを見る。

元の一文と並べて、残った語と落ちた語を見る。これは、第3章の、根拠の文を原文と並べて見るのと同じ作業です。AIの返事の感じのよさは脇に置いて、並べる。動画でClaudeが見つけたのも、並べて見たからこそ分かる1か所の差でした。それだけで、言い回しの差は見えてきます!

AIが縮めたり言い換えたりした自分の言葉を、元の一文と並べて見たことはありますか?1語の差で、答えの強さが変わることがあります。次に大事な答えを受け取ったら、元と並べる所から始めてみませんか!

魂磨きの記事で、AIの聞き方で言葉の範囲が変わった日のことと、元の一文と並べて見る方法を書いています。

魂磨きの記事:AIへの訂正は、その場の一言で終わらせない

分身AIについてもっと知りたい方は分身AI.comもチェックしてね!

AIの答えを使う前に、出典と原文で確かめる

AIの答えを自分の仕事で出典と原文から確かめる

この記事のURLをAIエージェントに読ませると、自分が頼んだ調べものや下書きの答えのどこを、どの順で確かめればよいかを整理できます。枠の中にこの記事のURLが入っているので、そのまま貼れて、自分の環境で使える追加のプロンプトまで手元に残せます。

1

出典のページを開く

AIの答えに付いた出典のページを開いて、出した人・時期・数字が答えと同じかを見ます。付いていない答えは、確かめるまで使いません。

2

根拠の文を原文と並べる

AIに根拠の文をそのまま出させて、出典の原文と並べ、一字ずつ見ます。言い回しが1か所変わるだけでも、意味の強さは変わります。

3

別のAIに貼って比べる

同じ答えを別のAIに貼り、食い違った所だけ原文を開きます。自分の環境で使える追加のプロンプトも、ここで案内します。

使ってみたい場合だけ、下のボタンを開くと、使い方と依頼文が出てきます。依頼文は、手元のAIエージェントにそのまま貼れる形で入れてあります。

▶ タップしてプロンプトを開く

①下の枠の文を、丸ごとコピーして、手元のAIエージェントに貼ってください。枠の中には、この記事のURLが入っています。

②貼ると、AIがURLの記事を読んだあと、短い質問を1つずつ聞いてきます。答えていくと、自分の仕事に当てはめた整理と、手元の環境に合わせた追加のプロンプトが返ってきます。

③返ってきた結果は、そのまま信じず、自分の目で読み直してくださいね。出典のページや原文を開いて確かめるのは、最後は自分の手です。

次の依頼を、確認と整理だけで行ってください。

【記事のURL】
https://ai-kidou.jp/video-report-ai-hallucination-check/
最初に、このURLの記事を読んでください。読めない時は、読めなかったと伝えて、下の記事の要点だけを材料にしてください。

【記事の要点】
・語り手は動画で、AIの嘘(ハルシネーション)は、分からない時にもそれらしく答える癖がつく育ち方が理由の1つだと話しています。
・年賀状の質問を ChatGPT・Gemini・Claude に出すと、どれも大事な日付は正しかったそうです。それでも、出典のページを開いて出した人・時期・数字を見る、根拠の文をそのまま出させて原文と並べる、無いものを聞いて無いと答えるかを見る、別のAIに貼って食い違いを探す、と話しています。
・お金の計算は電卓で、曜日はカレンダーで見ること、確かめる所はお金・健康・法律・日付・数字に絞ることも話しています。
・記事の筆者の考えは、答えを最初の一言で決めず、出典と原文で確かめてから使うことです。外に出す文章に入れる引用とURLは、数字でなくても確かめます。別のAIの答えも、人が原文を開く入口にとどまります。

【目的】
貼った人が自分でAIに頼んだ調べものや下書きの答えについて、どこを確かめるかを整理し、確かめる順番を決めることです。

【やってよいこと】
・記事を読んだあと、短い質問を1つずつ聞く(AIに頼んだ調べものや下書きの種類/その答えの中の日付・数字・引用・人の名前/出典の有無/外に出す予定の有無/使っているAIや道具)
・答えに合わせて、確かめる所に印をつける
・出典を開く、根拠の文を原文と並べる、別のAIに貼る、のどれから始めるかを、理由つきで出す
・使っている環境にそのまま貼れる追加のプロンプトを1〜3本つくる(各プロンプトの中に記事のURLを入れる)

【守ること】
・設定を変える、消す、送る、買うことは実行せず、確認と提案だけを書く
・パスワードや鍵を貼らせない、聞かない
・記事に無い数字、機能、料金を足さない
・動画の例(年賀状の日付、出典41件など)は語り手の話として扱い、自分の環境でも同じ結果になると断定しない
・AIの答えを正しいと断定せず、確かめられない所は「未確認」と書く

【返す形】
・項目ごとに短く書く
・根拠にした記事の話と、自分の答えを分けて書く
・分からなかった所は「未確認」と書く
・最後に「追加のプロンプト(1〜3本・記事のURL入り)」と、「自分の目で読み直す所」を1行で付ける
FAQ

よくある質問

▲目次

Q. ハルシネーションとは、何ですか?

A. AIが本当じゃないことを、もっともらしく答えてしまうことです。分からない時にもそれらしく答える癖がつく育ち方が理由の1つ、と語り手が話します。

Q. 出典の印が付いていれば、その答えを信じていいですか?

A. 動画では、そうとは限らない例が出ます。Deep Researchの出典41件のうち、一番上の1件を開くと、レポートの数字はそのページには無く、別の出典から取られていました。

Q. AIに、本当?と聞き返せば、確かめたことになりますか?

A. 動画の例では、3種類のAIとも答えを変えませんでした。ただ、押されると答えを変えることもあるので、根拠の文をそのまま出して、と頼む方法が勧められています。

Q. AIの答えは、全部確かめないといけませんか?

A. 出典41件を全部確かめなくても大丈夫で、確かめるのはお金・健康・法律・日付・数字の所だけ、と語り手が話します。病気やお金、法律は、公式の案内や専門の人に確かめます。

MATOME

まとめ

▲目次

7つの章を通して、私が言いたいのは1つです。AIの嘘に振り回されないために、答えは1回目で決めず、出典と原文で確かめてから使う。

間違える仕組みを知り、出典を開いて同じ数字を探す。根拠の文を原文と並べて、聞き返す。無いものと計算を確かめる。

印をつけてもらい、別のAIで食い違いを探す。Deep Researchの出典は、ページを開いて数字を見る。確かめる所は絞ります。

語り手(動画の中で・15:42〜)

今回は3つのAIとも大事な日付は正しかったよ。でも正しいと分かったのは確かめたからなんだ。

3種類のAIとも大事な日付は正しかったが、正しいと分かったのは確かめたからだ、と語り手が話します。ハルシネーションは、正解の時にも隠れているわけです。

正しいと分かる手順を持っているか。見たいのはそこです!

LINK

関連記事

今回紹介した動画

チャンネルAI market
出演語り手の解説(動画の中で名乗りなし)
公開日2026年11月19日
長さ16分15秒(日本語の音声)
URLhttps://www.youtube.com/watch?v=gTcVX9k_iSg

🎁 無料プレゼント

Aiport(ClaudeCode AIエージェント実践会)

ClaudeCodeでAI秘書+分身AI+AIカンパニーが無料で作れるキット&解説動画をプレゼント!

▶ 無料で入会してキットを受け取る

🤖 AI生成コンテンツについて

この記事はAIツール(Claude Code)を活用して制作しています。構成・文章生成にAIを使用し、最終的な内容の確認・編集・公開判断はひろくん(田中啓之)本人が行っています。「分身AIひろくん」(bunshin-ai.com)とは別のコンテンツです。

この記事が気に入ったら、シェアをお願いします

この記事で学んだことを誰かに教えて恩送りして学びを深めよう!

XLINEはてブ

関連記事