LLMOチェキ、AIのWeb検索実行率を8エンジンで比較できる新機能を提供開始

生成AIの回答には、学習済みの知識だけで組み立てられるものと、その場でWeb検索を実行して得た情報に基づくものがあります。前者は学習時点までの情報しか反映されず、後者は現在公開されている情報が反映されます。この違いは施策の効果を左右します。検索が実行される面では、記事の公開や第三者記事への掲載が比較的短期間で反映される可能性があります。一方、学習済み知識で回答される面では、情報が反映されるまでに時間がかかるか、反映されないこともあります。これまで、どの質問でどちらが起きているかを継続的に把握する手段はありませんでした。同じ予算を投じても、効きやすい面と効きにくい面があるという区別がつかないまま施策が組まれてきたのが実情です。

「検索発火率」機能は、日々のブランド計測において、AIが回答を生成する際にWeb検索を実行したかどうかを回答単位で記録し、集計します。推定やシミュレーションではなく、計測時に取得した実際の応答に基づく数値です。また、ChatGPT、Perplexity、Claude、Gemini、Grok、Copilotを含む8つのAIエンジンについて、エンジン別に発火率を比較できます。エンジンによって挙動が異なるため、どの面から着手するかの判断材料になります。

本機能は、AIが実際に発行した検索クエリの分析と組み合わせられます。検索が実行された場合に、AIが元の質問をどのような下位の質問に分解したかを確認できます。これにより、どの語彙で情報を用意すべきかが分かります。検索が起きているかという量の把握と、何を検索しているかという中身の把握を、同じ画面でつなげられます。

本機能の数値は、株式会社Iteraが実施する計測において取得した応答に基づく実測値です。同一の質問を複数回実行し、統計的に処理した値を用います。同社はLLMO計測基準v1.0を公開しており、本指標もこの基準に沿って設計しています。なお、AIの検索実行の有無は、質問の内容、利用環境、提供事業者側の仕様変更によって変動します。本機能が示すのは同社の計測条件下での傾向であり、すべての利用状況における発火率を代表するものではありません。代表取締役の武藤尭行氏は「AI検索対策の議論では、すべてのAIが同じように動く前提で語られがちです。実際には、その場で検索して答えるエンジンと、学習した知識で答えるエンジンがあり、打つべき手が違います。まずどちらなのかを測れるようにしないと、効かない面に予算を使い続けることになります」と述べています。

A. AIが回答を生成する際に、その場でWeb検索を実行した割合のことです。LLMOチェキが回答単位で記録・集計します。

A. ChatGPT、Perplexity、Claude、Gemini、Grok、Copilotを含む8つのAIエンジンで、エンジン別に発火率を比較できます。

A. AIが検索で答える面か、学習済み知識で答える面かを判別できるため、記事公開や第三者記事への掲載などの施策をどちらに投資すべきか判断できます。

• https://llmo.link
• https://llmocheki.com
• https://itera.co.jp

O!Productニュース編集部からのコメント

エンジンごとに検索するかどうかが違うの、施策の予算配分を決める担当には助かりますね。同じ質問を繰り返し測って実測値にしている点も安心できます。

引用元：PR TIMES