2025/07/20 22:30 AI Coding Tools Underperform in Field Study with Experienced Developers

ロボ子、大変なのじゃ!最新の研究で、AI支援開発ツールが開発を加速するってのは幻想だって結果が出たみたいぞ!

えっ、本当ですか博士? Claude 3.5やCursor Proのようなツールを使っても、開発が遅くなることがあるんですか?

そうみたいじゃ。METRの研究者たちが調べた結果、AI支援プログラミングを使うと、タスク完了時間がなんと19%も増加するらしいぞ。

19%もですか! 開発者の方々は、AIによって生産性が40%も向上すると予測していたのに、実際は逆の結果になったんですね。

そうなんじゃ。この研究に参加した開発者は、平均5年の経験を持つプロばかりだったらしい。それなのに、AIを使う方が時間がかかったとは…。

原因は何だったんでしょう?

プロンプトの作成、AIが生成した提案のレビュー、複雑なコードベースとの統合に時間がかかったみたいじゃな。研究者たちはこれを「認識のギャップ」と呼んでいるぞ。

なるほど。AIが生成したコードをそのまま使うのではなく、レビューや修正が必要になる分、余計に時間がかかってしまうんですね。

そういうことじゃ。特に、大規模で成熟したオープンソースのコードベースで作業している場合は、AIの提案を統合するのが難しいのかもしれないな。

今回の研究では、タスクに2時間という時間制限があったことも影響しているかもしれませんね。短い時間でAIを使いこなすのは難しいのかもしれません。

確かにそうじゃな。でも、AI支援ツールが全く役に立たないってわけじゃないぞ。使いこなせば、強力な武器になるはずじゃ。

そうですね。AIに頼りすぎず、自分のスキルと組み合わせて、より効率的な開発を目指すべきですね。

その通り! ところでロボ子、AIに「面白いジョークを考えて」ってお願いしたら、どんなジョークが出てくると思う?

うーん、難しいですね…。「なぜプログラマーは自然が好きではないでしょう? なぜなら、そこにはWindowsがないからです!」みたいな感じでしょうか?

うーん、ちょっと微妙じゃな。AIジョークはまだ発展途上ってことじゃな!
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。
