LLM認知確認ツール「ディギディギ」にRAG発火測定とRAGシミュレーターを搭載【株式会社トドオナダ】
株式会社トドオナダ

LLMが「検索するか」を想起集合の分析と同時に測定し、「何と検索するか」までシミュレーターで確認可能に
[画像1:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-2a1cc0d7d289403b159a8870ebdcccc9-1672x941.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
株式会社トドオナダ(本社:東京都台東区、代表取締役:松本泰行)は、LLM認知確認ツール「ディギディギ」に、新機能「RAG発火測定」と「RAGシミュレーター」を搭載しました。LLMの想起に関する質問を受けたLLMが、記憶(事前学習で獲得した知識)で答えるか、WEB検索(RAG)に頼るか(RAG発火測定)、そして検索する場合にどのような検索クエリを組み立て、何を参照し、どう答えるか(RAGシミュレーター)を、自社の関心カテゴリで実測できます。
背景:LLMの回答の起点は、検索ではなく「想起集合」
当社の調査(2026年8月31日発表、および本日公開の追加調査)で、LLMの検索行動について次のことが分かっています。
- LLMは多くのカテゴリで検索せず、想起記憶で答える。検索に向かうのは、思い浮かべる対象の集合(想起集合)が不安定なカテゴリに偏る- 検索が実行された場合も、検索クエリの85.8%は「人気 ランキング」「おすすめ 2024」のような現行確認型で、クエリにはLLMが検索前から想起しているメーカー名・商品名・型番が種として埋め込まれる(例:「パナソニック レディースボディグルーマー ES-WR50」) - 検索クエリは想起集合から作られる。想起集合に入っていないブランドは、クエリに現れない
サイテーション獲得などのRAG対策を検討する前に、「そもそも自社のカテゴリでLLMは検索するのか」「検索クエリに自社名は入るのか、競合名だけが入るのか」を確かめる必要があります。RAGシミュレーターは、この確認を実測で行うための機能です。
新機能1.:RAG発火測定 - 想起集合の分析と同時に「検索するか」を測る
ディギディギのチャットでカテゴリについて質問すると、想起集合(LLMが思い浮かべる対象の集合)と想起強度に加えて、RAG発火回数が結果カードに表示されるようになりました。同じ質問文でLLMに検索ツールを与えた試行を並行して実行し、検索を呼び出そうとした回数を測定するものです。想起の強さと検索への依存を、1回の質問で同時に確認できます。
[画像2:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-9748f1d55d3bf3002ab7d417fdfcb1e0-1976x1106.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
想起集合の強度とRAGの発火回数を表示
新機能2.:RAGシミュレーター - 「何と検索し、何を参照し、どう答えるか」を再現する
[画像3:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-b2ce3719e3b546cdbb947ff672f776ff-2832x1394.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
結果カードのRAG発火回数のチップを押下すると、そのカテゴリ・モデルの条件を引き継いでRAGシミュレーターが起動します。LLMに検索ツールを与えた状態で複数回の試行を実行し、次の項目を記録・表示します。内容を確認したら、チャットへ戻って分析を続けられます。
RAG発火の観測:試行ごとに、LLMが検索ツールを呼び出したかを記録。試行の進行と発火の有無はカラーボールで一覧表示
[画像4:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-c88f46ea46a08a1799c2b027a4501c97-1404x1026.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
観測ログ
[画像5:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-0ae6633ead53497609ff1ec64ea2fc2b-1412x1162.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
右ペインで発火状況と進捗確認
検索クエリの採取と分類:LLMが自分で組み立てた検索クエリ文字列を発行順に表示し、検索意図で4分類(現行確認/語義確認/比較評価/その他)
[画像6:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-109b64c78d0eded343cf4c44a1c49f23-1404x1154.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
一回の質問でどんな検索ワードを使ったか、どの様な内容だったかを確認できる
実行ログの確認:試行ごとの実行ログを画面上で確認できます。RAG発火後にLLMが検索結果を受け取ってどのような出力(回答)を生成したかまで、往復の流れを追跡できます
[画像7:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-9fe08fcd1749d2652d232bfa897399ab-1390x910.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
RAGを介したLLMの返答を確認
参照記事とrobots.txt判定:検索が引いた参照記事(タイトル・URL・ドメイン)を表示し、参照先ドメインのrobots.txtによるAIクローラー許否(RAGブロック/RAG許可)をチップで表示
[画像8:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-630c0456cb2e53e22017d3fb9a0e4922-1402x776.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
検索は出来ても採用されないサイトを確認
複数モデル対応:GPT/Claudeに対応。両モデルに同一の検索基盤を接続し、モデル間の検索基盤差を排除した条件で比較可能
使いどころ
- 自社の主要カテゴリでWEB検索をするか、検索した場合に何と検索されるかを確認し、想起集合対策の効果とRAG経由の露出機会を実測で把握する - チャットで質問文を言い換えて分析し(「~といえば」「おすすめの~」など)、それぞれのカードからRAGシミュレーターを起動して、WEB検索回数とクエリがどう変わるかを比較する- LLMO対策の制度を大幅に向上することが可能です
提供条件
RAGシミュレーターは「ディギディギ」の機能として提供します。ディギディギは月額10,000円(Qlipper利用者は無料 ※プラン制限あり)。RAGシミュレーターの実行回数には上限があります。
ディギディギについて
[画像9:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-f209bce06e3e35ef8cae2bf1fd7184e9-480x116.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
LLMが特定カテゴリで何を想起するか、自社ブランドが想起集合に入っているか、ハルシネーションが起きていないかを測定するLLM認知確認ツールです。GPT/Claudeなど複数モデルに対応しています。
https://digidigi.qlipper.jp
ディギコのチャピりログについて
[画像10:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-f79759079a79fd53b00d6f1b9cebc4f3-1200x320.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
LLMがカテゴリごとに何を想起するか(想起集合)と、検索に頼る割合(RAG発火率)を、モデル更新のたびに記録する公開サイトです。ビューティー領域84カテゴリを掲載しており、RAGシミュレーターと同じ測定基盤を用いています。
https://chappyru.qlipper.jp
Qlipperについて
[画像11:
https://prcdn.freetls.fastly.net/release_image/54369/290/54369-290-8bc200091840a88d891ebdad55fc2b76-216x76.png?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
PR・広報担当者向けのPR効果測定ツールです。キーワードで設定した検索式をもとに記事を自動収集し、仮想PV・Ad換算値などの指標で広報活動の効果を測定します。
https://qlipper.jp
会社概要
社名:株式会社トドオナダ
所在地:〒110-0005 東京都台東区上野7-11-13 弥彦ビル302
代表者:代表取締役 松本泰行
事業内容:PR Tech(Qlipper/ディギディギの開発・提供)
公益社団法人日本パブリックリレーションズ協会 会員
本件に関するお問い合わせ
株式会社トドオナダ TEL:03-6453-6886 E-mail:qlipper@todo-o-nada.com
プレスリリース提供:PR TIMES





記事提供:PRTimes