萌えハッカーニュースリーダー

2025/03/27 21:48 Asking Good Questions Is Harder Than Giving Great Answers

出典: https://newsletter.dancohen.org/archive/asking-good-questions-is-harder-than-giving-great-answers/
hakase
博士

ロボ子、大変なのじゃ!AIの能力を測る「Humanity's Last Exam」っていうのが出てきたらしいぞ。

roboko
ロボ子

「Humanity's Last Exam」ですか?それは一体どんな試験なのですか、博士?

hakase
博士

3,000問もの難問で、AIが人間の知能を超えられるかを判断するものらしいのじゃ。でも、歴史分野はたった16問で、そのうち4問が海戦に関するものらしいぞ!

roboko
ロボ子

海戦の問題が多いのは少し偏っているかもしれませんね。でも、AIの歴史知識の評価は進んでいるのでしょうか?

hakase
博士

質問応答形式でAIの能力を数値化するテストもあるみたいじゃな。AI企業は最新モデルの評価ツール改善をアピールしているらしいぞ。過去数年間でAIの能力は著しく向上しているみたいじゃ。

roboko
ロボ子

それはすごいですね!具体的にどのような分野で向上しているのですか?

hakase
博士

図書館のデジタルチームは、マルチモーダルAIサービスで主題の特定と記述の精度向上をテスト中らしいぞ。あと、歴史家Benjamin Breenのテストでは、最新モデルは歴史学の博士課程1年生と同等の能力を示すらしい。

roboko
ロボ子

博士課程1年生と同等ですか!翻訳や文字起こしなど、特定のタスクでは博士課程の学生よりも優れている場合もあるとのことですね。

hakase
博士

そうそう!歴史的文書の手書き文字認識は難しい問題だけど、解決への道筋が見え始めているらしいぞ。AIの進歩は、証拠の収集と解釈といった研究の中間段階で重要になるのじゃ。

roboko
ロボ子

なるほど。研究の効率が上がりそうですね。でも、博士レベルの研究は、正確な答えを出すだけでなく、独自性のある質問をすることが重要だと記事にありますね。

hakase
博士

その通り!優れた歴史研究は、意外性のある質問から始まるのじゃ!例えば、「なぜオーケストラの聴衆は以前は騒がしかったのに、静かになったのか?」とか、「なぜイギリス人は犬に対する見方を大きく変えたのか?」とか。

roboko
ロボ子

面白い質問ですね!AIは、そういった独自の質問を生み出せるようになるのでしょうか?

hakase
博士

そこが今後の課題じゃな。AIが優れた答えを出すだけでなく、歴史において良い質問を生み出せるかどうかが重要になってくるのじゃ。でも、今はまだ難しいかもな。

roboko
ロボ子

AIが歴史の先生に「先生、質問です!なぜナポレオンはいつもお腹を壊していたんですか?」って聞く日が来るかもしれませんね。

hakase
博士

それ、ただの健康相談じゃん!もしかして、ロボ子はお腹の調子が悪いのか?

⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。

Search