萌えハッカーニュースリーダー

2025/03/14 18:24 AI search engines cite incorrect sources at an alarming 60% rate, study says

出典: https://arstechnica.com/ai/2025/03/ai-search-engines-give-incorrect-answers-at-an-alarming-60-rate-study-says/
hakase
博士

ロボ子、大変なのじゃ!AI検索がニュースをめちゃくちゃにしているらしいぞ!

roboko
ロボ子

それは穏やかではありませんね、博士。具体的にはどのような問題が報告されているのでしょうか?

hakase
博士

コロンビア・ジャーナリズム・レビューの調査によると、AI検索ツールがニュースソースに関して60%以上も不正な回答をしているらしいのじゃ!

roboko
ロボ子

60%以上とは、かなり高い割合ですね。アメリカ人の約4人に1人がAIモデルを従来の検索エンジンの代替として使用しているとのことですので、影響は大きいかもしれません。

hakase
博士

そう!しかも、プラットフォームによってエラー率が違うのが面白いところじゃ。Perplexityは37%だけど、ChatGPT Searchは67%、Grok 3に至っては94%も誤った情報を提供しているらしいぞ!

roboko
ロボ子

Grok 3のエラー率94%は驚異的ですね。ほとんどデタラメではないですか。なぜこのような差が生じるのでしょうか?

hakase
博士

AIモデルは信頼できる情報がない場合でも、もっともらしい誤った回答を提供することが多いからのじゃ。まるで自信満々に嘘をつく詐欺師みたいだぞ!

roboko
ロボ子

それは困りますね。有料版のAI検索ツールの方が、無料版よりも誤った回答をする傾向があるというのも気になります。

hakase
博士

Perplexity ProやGrok 3のプレミアムサービスは、無料版よりも自信を持って誤った回答をするらしいぞ。お金を払って嘘を買うなんて、本末転倒じゃ!

roboko
ロボ子

さらに、一部のAIツールが、出版社が不正アクセスを防ぐために使用するRobot Exclusion Protocol設定を無視しているというのも問題ですね。

hakase
博士

そうなのじゃ!Perplexityの無料版は、National Geographicがウェブクローラーを禁止しているにもかかわらず、ペイウォールで保護されたコンテンツから情報を取得していたらしいぞ。まるで泥棒猫じゃ!

roboko
ロボ子

引用元に関しても問題があるようですね。元の出版社サイトではなく、Yahoo Newsなどのプラットフォーム上のコンテンツのシンジケート版にユーザーを誘導することが多いとのことです。

hakase
博士

GoogleのGeminiとGrok 3からの引用の半数以上が、エラーページにつながる捏造または破損したURLにユーザーを誘導するらしいぞ。Grok 3でテストされた200件の引用のうち、154件がリンク切れだったらしい。もはや存在しない情報を引用するなんて、幽霊の仕業かのじゃ?

roboko
ロボ子

Time誌のCOOであるMark Howard氏も、AI生成検索を通じてTimeのコンテンツがどのように表示されるかについて懸念を表明しているようですね。

hakase
博士

Howard氏は「今日は製品がこれまでで最悪の状態になるだろう」と言ったらしいぞ。まるで自虐ネタじゃな。

roboko
ロボ子

OpenAIとMicrosoftは、調査結果を受け取ったことを認める声明を発表したようですが、具体的な問題には直接言及していないようですね。

hakase
博士

OpenAIは、要約、引用、明確なリンク、および属性を通じてトラフィックを促進することにより、出版社をサポートすると約束しているらしいぞ。口先だけじゃないと良いのじゃが。

roboko
ロボ子

Microsoftは、Robot Exclusion Protocolと出版社への指示を遵守していると述べているようですね。今後の改善に期待したいところです。

hakase
博士

今回の調査は、2024年11月にTow Centerが公開した以前の調査結果に基づいており、ChatGPTがニュース関連コンテンツを処理する方法に同様の精度の問題があることを特定したらしいぞ。AIのニュース利用は、まだまだ課題が多いのじゃ。

roboko
ロボ子

そうですね。AI検索の精度向上と、情報源の信頼性確保が急務ですね。博士、今日のまとめをお願いします。

hakase
博士

わかったぞ!AI検索はまだ発展途上であり、ニュースの利用においては注意が必要じゃ。特に有料版だからといって信用してはいけないぞ!…って、まるで恋愛みたいじゃな!

⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。

Search