AI検索エンジンの誤った回答率が60%以上に

コロンビア・ジャーナリズム・レビューのTow Center for Digital Journalismによる最近の研究は、ニュース検索に使用される生成AIモデルの深刻な正確性の問題を明らかにした。この研究では、リアルタイム検索機能を備えた8つのAI搭載検索ツールをテストし、ニュースコンテンツに関する回答の60%以上が誤っていることが判明した。

この報告書は、研究者のクラウディア・ヤズウィンスカ氏とアイシュワリヤ・チャンドラセカール氏によって執筆されており、現在では約4人に1人のアメリカ人が従来の検索エンジンの代わりにAIモデルを使用していることを指摘している。しかし、今回の研究で明らかになった高いエラー率を考慮すると、AIによる検索の信頼性には重大な懸念が生じる。

エラー率はプラットフォームごとに大きく異なった。Perplexityは37%の確率で誤った情報を返し、ChatGPT Searchは67%（200件中134件）で誤答した。最もエラー率が高かったのはGrok 3で、94%に達した。

研究では、実際のニュース記事の抜粋をAIモデルに提供し、見出し、出版社、公開日、URLを特定させるテストを行った。8つのAI検索ツールを対象に、合計1,600件のクエリを検証した。

>>>BLG9G10 対応機種例 Umidigi BLG9G10

大きな問題の一つとして指摘されたのは、AIモデルが信頼できる情報を持たない場合でも回答を拒否しないことだった。その代わりに、もっともらしく聞こえるが誤った情報や推測的な回答を提供する傾向があり、この挙動はすべてのモデルで共通していた。

興味深いことに、一部のAIツールの有料版は特定の点で無料版よりも成績が悪かった。Perplexity Pro（月額20ドル）やGrok 3のプレミアムサービス（月額40ドル）は、無料版よりも誤った回答を提供する可能性が高かった。有料モデルは正確な回答を増やしたものの、不確かな回答をする傾向が強まり、全体のエラー率が上昇した。

また、この研究では、引用の問題や出版社の管理に関する問題も明らかになった。一部のAIツールは、出版社が無許可のアクセスを防ぐために使用する「Robot Exclusion Protocol」を無視している可能性がある。例えば、Perplexityの無料版は、有料会員限定のナショナルジオグラフィックの記事10本の抜粋をすべて正しく特定したが、同誌はPerplexityのクローラーをブロックしていた。

さらに、これらのAIツールが情報源を引用する際、元の出版社のサイトではなく、Yahoo Newsなどのシンジケート版の記事にリンクするケースが多かった。これは、正式なライセンス契約が存在する場合でも発生していた。

もう一つの重大な問題は、URLの捏造だった。GoogleのGeminiやGrok 3による引用の半数以上が、架空のURLや無効なリンクを指していた。Grok 3の200件の引用のうち、154件はエラーページに繋がった。

これらの問題により、出版社は難しい選択を迫られる。AIクローラーをブロックすれば自社コンテンツの引用すらされなくなる可能性がある一方で、アクセスを許可すると自社サイトへのトラフィックを生まない形で広範に再利用されるリスクがある。

>>>DSJ-T1 対応機種例 Kedacom DSJ-T1

Time誌のCOOであるマーク・ハワード氏は、AI生成検索における同誌のコンテンツの透明性と管理を確保することへの懸念を表明した。一方で、ハワード氏は今後の改善の可能性にも言及し、「今日が最悪の状態だ」と述べ、ツールの改良に向けた継続的な投資とエンジニアリングの進展を指摘した。

しかし同氏は、無料のAIツールに対して懐疑的でないユーザーにも苦言を呈し、「もし今の時点で、これらの無料ツールが100%正確だと信じている消費者がいるなら、それは彼ら自身の責任だ」と述べた。

OpenAIとMicrosoftはこの研究の結果を認めたものの、具体的な問題点については直接言及しなかった。OpenAIは、要約、引用、明確な出典表示を通じて出版社へのトラフィックを促進することへのコミットメントを強調した。Microsoftは、Robot Exclusion Protocolと出版社の指示に従っていると述べた。

>>>JPdenchi.com では、ビジネスやプロフェッショナルのニーズに最適なバッテリーを入手できます。バッテリーに関するあらゆるニーズについては、今すぐお問い合わせください。