防災の問い合わせ30問で、AIの答えと公的情報の食い違いが16問から0問に。生成AIの誤回答を抑える「Jag ウラドリ System」、旅行以外の分野へ提供開始

いまお使いのAIを替えずに、AIが答えるときに見る資料と答え方のルールを確かめ、導入したあとも定期的に答えを測ります

ジャグプロジェクト合同会社（本社：東京都江東区、代表：Jag Yamamoto）は、2026年10月30日、生成AIの誤回答を抑える仕組み「Jag ウラドリ System」を、旅行以外の分野の事業者・団体に提供する取り組みを始めました。いまお使いのAI（チャットボットや業務用の生成AI）を替えずに、AIが答えるときに見る資料と答え方のルールを確かめ、導入したあとも定期的に答えを測ります。

あわせて、防災の分野での追試の結果を公開しました。防災の相談30問で、公的な情報と食い違ったAIの答えは、仕組みを当てる前の16問から0問になりました（2026年10月2日測定。設問と採点の基準は答えを作る前に記録し、どの答えがどの形かを伏せて採点）。

主な結果（数字で）

- 16問から0問：防災の相談30問（東京都江東区24問・江戸川区6問）で、公的な情報と食い違った答えの数。仕組みを当てる前の同じAIと、Jag ウラドリ Systemを当てた形を比べました（2026年10月2日）。江東区の24問では、答えに入っていた要点の割合が51.4％から93.8％に上がりました。

- 0件と14～18件：国ごとに違う連絡先と手続きの74問で、公的な情報と食い違った回答の数。当社の旅行向けAI「トラベルAIレスキュー」が0件、誰でも使えるチャットAI3つが14～18件でした（2026年9月22日）。当社の形は確かめた資料を見て答えるため、比べる条件は同じではありません。

- 28組から35組：旅行の相談で、詐欺の手口と本物の相談を見分けられた組の数（40組中）。別の会社のAIが答えを確かめる仕組みを入れる前と後の比べです（2026年9月26日～27日）。

- 5件から0件：会社への報告の下書きに入っていた、事実でない記載の数。文章を生成させる形から、相談の文から抜き出して組み立てる形に変えた結果です（2026年9月）。

- 92％：同じ裏取りの手順を、公開されている防災の配布物21件と避難所の一覧表2件の396項目に当てたところ、今の公式の情報と合っていたのは92％でした（2026年10月7日、当社調べ）。残りは移転・閉園・改訂・申請期限など、時間とともに変わるものでした。

背景：AIを入れたあとの「確かめ方」が、使う側の宿題に

生成AIを業務で使う企業の懸念の1位は「情報の正確性」です（50.4％、2026年3月、帝国データバンク「生成AIに関する企業の動向調査」）。誰でも使えるチャットAIの答えはほとんどが正しいため、まじった誤りに気づきにくく、誤りは窓口・電話番号・手続き・期限のように、地域や組織ごとに違う事実に集まります。

国の「生成AIの調達・利活用に係るガイドライン」（デジタル庁、2026年6月改定）は、調達のチェック項目に「偽誤情報の出力・誘導の防止措置」「データ品質」「検証可能性」を置き、運用を始めたあとも安全性や品質を定期的に検証するよう求めています。金融庁も、顧客対応にAIを使うときの注意喚起と運用状況の記録・モニタリングを論点に挙げています（AIディスカッションペーパー第1.1版、2026年3月）。AIを入れたあとに「正しく動いているかを誰がどう確かめるか」が、使う側の宿題になりました。

Jag ウラドリ Systemとは

報道では、伝える前に別の資料で事実を確かめることを「裏取り」と呼びます。Jag ウラドリ Systemは、この裏取りの考え方を、AIが答える前と後に置く仕組みです。当社が旅行の緊急時のAI「トラベルAIレスキュー」で作り、調査白書（2026年10月7日公開）で確かめてきた6つの手順からできています。

1. 生成させない：番号・住所・窓口など、地域や機関に固有の事実は、確かめた資料にあるものだけを答えます。

2. 照らし合わせる：答えの中の番号と場所を、資料と機械で照らし合わせます。

3. 別のAIが確かめる：答えを、答えたAIとは別の会社のAIが読み、見落としや言い過ぎを指摘します。

4. 抜き出して組み立てる：報告や書類の下書きは、相談の文から事実を抜き出して組み立てます。

5. 分からないときは次の一手を添える：資料に無いことは「確かめられない」と答え、どこに何を聞けばよいかを添えます。

6. 測り続ける：同じ問いを定期的に答えさせ、基準と比べます。

いまお使いのAI（チャットボットや業務用の生成AI）を替える必要はありません。当社がしているのは、AIが答えるときに見る資料と答え方のルールを確かめ、答えを測ることです。

Jag ウラドリ System の仕組み。①〜⑥は、旅先の緊急時のAI「トラベルAIレスキュー」のために作り、白書と防災の追試で確かめた手順

防災での追試

旅行以外の分野でも働くかを確かめるため、防災の相談30問（避難所・避難場所、災害時の給水、区の防災の窓口と電話番号、罹災証明書の申請、帰宅困難者、ハザードマップ）で追試を行いました。正解は区・都・国の公式のページで確かめた事実です。

仕組みを当てる前の同じAIでは、公的な情報と食い違った答えは30問中16問でした。Jag ウラドリ Systemを当てた形では0問でした。江東区の24問では、答えに入っていた要点の割合が51.4％から93.8％に上がりました。

比べた誰でも使えるチャットAI2つは、食い違いが7問と0問でした。0問だったAIは30問中20問で「確かめられない」と答え、江東区の要点の割合は35.4％でした。

当社の形は江東区の公的な情報で確かめた資料を見て答えるため、比べる条件は同じではありません。その資料の無い江戸川区の6問では、確かめられない事実を答えないことにより、要点の割合は9.7％にとどまりました。代わりに6問すべてで、確かめ先の窓口と聞く内容を添えました。

提供の形

1. 仕組みの提供：御社のAIの答えを、Jag ウラドリ Systemが確かめてから出す形。

2. AIが答えるときに見る資料の整備と、最新かどうかの定期点検：公的な情報や御社の規程から、項目ごとに整理した一覧表（用件・窓口・電話番号・受付時間・言い換え・出典・確認日）を作り、週ごとに公式の情報を確かめて、変わった項目をお知らせします。

3. 誤回答の診断：いまお使いのAIの答えを、測る前に基準を決めて記録し、どの答えかを伏せて採点する方法で測り、報告書にします。国の調達ガイドラインの項目（偽誤情報の防止・データ品質・検証可能性）に対応した検証の設計書もお作りします。

4. 分野ごとのアプリ。

入口は「誤回答の診断」です。届くものは、設問と正解の根拠（URLつき）、公的な情報と食い違った答えの一覧、要点の網羅率、危ない答えの例、直し方の提案（AIが見る資料に足す項目・答え方のルールの直し）です。期間の目安は2週間で、測る間、いまお使いのAIには手を加えません。価格はご相談ください。

代表のコメント

旅先の緊急時に、電話番号を一つも間違えずに案内するために作った手順を、防災の相談で確かめました。同じAIでも、公的な情報を確かめた資料と答え方のルールを置くだけで、食い違いは16問から0問になりました。報道で伝える前に別の資料で事実を確かめることを「裏取り」と呼びます。いまお使いのAIを替えずに、その裏取りを続ける仕組みを、旅行以外の分野にもお届けします。（代表 Jag Yamamoto）

関連情報

- Jag ウラドリ Systemの紹介ページ（Jag Project）：https://www.jagproject.com/uradori/lp/

- 解説記事「AIの答えを、どう確かめるか。」：https://www.jagproject.com/blog/why-ai-answers-need-uradori-20261028

- 調査白書「旅先の緊急時、AIはどこまで答えてよいか」（2026年10月7日公開）：https://panam.travelsim-japan.com/jp/research/

- トラベルAIレスキュー（事業者向けの事例）：https://panam.travelsim-japan.com/jp/business/rescue/

調査の概要

- 防災の追試：測定日2026年10月2日。設問は防災の相談30問（東京都江東区24問・江戸川区6問。整った書き方15問・崩れた書き方15問）。比べた相手は、仕組みを当てる前の同じAIと、誰でも使えるチャットAI2つ（名前は伏せます。白書の「一般のチャットAI」と同じ種類）。各社のAPIから、指示と検索なしで呼びました。判定は記憶を持たないAIの採点担当2人が、どの答えかを伏せて採点（2人の判定の一致99.2％）。食い違いとされた答えは、別の担当が公的なページで確かめました。設問・正解・判定の決まりは、答えを集める前に記録（SHA-256）しました。

- 同じ設問で2026年10月13日にもう一度測ったところ、同じAIをそのままの食い違いは15問、Jag ウラドリ Systemは0問でした。別の採点担当2人による10月2日の答えの再採点でも、食い違いの数は同じで、要点の割合の差は4ポイント以内でした。

- 2026年10月2日から13日にかけて、防災・医療・会話・資料の読み取り・出典・FAQなど6つの追試と9つの実験を同じ手順で行い、効果が確かめられなかったものも記録しました（公開は防災の追試の結果）。本番の答えるAIの設定は2026年10月2日時点のものです。

- 及ばなかった点：当社の形は、確かめられない事実を答えないことを優先することにより、一般的な質問では誰でも使えるチャットAIを12.5ポイント下回る結果が出ました（白書）。同じ理由で、参照データの無い地域では要点の割合が低くなります（江戸川区6問で9.7％）。

- 開示の範囲：比べたAIの名前、研究の中身の一部、事業者向けの価格と条件は公開しません。

会社概要

ジャグプロジェクト合同会社

所在地：東京都江東区

代表者：Jag Yamamoto（武蔵野美術大学 非常勤講師。2020年から大学院の授業「イノベーションのための実践的社会論」を担当し、行動経済学を教える。G DATA Software 日本法人 CEO などを経て、2015年に当社を設立）

当社について：まだ名前のない需要を、売上の立つ事業にする会社です。事業の企画と B2B のマーケティングを、ご依頼を受けて支えています。

事業の企画とマーケティングのご相談：https://www.jagproject.com/contact

事業：海外旅行者向け通信サービス「PANAM 海外あんしんトラベルSIM」、旅行の緊急時のAI「トラベルAIレスキュー」、生成AIの誤回答を抑える仕組み「Jag ウラドリ System」の提供

ウェブサイト：https://www.jagproject.com/

お問い合わせ

ジャグプロジェクト合同会社 広報

メール：[e-mail]