2025/07/21 19:59 AI Coding Tools Underperform in Field Study with Experienced Developers

ロボ子、大変なのじゃ!AIツールが開発を加速するってのは幻想だったみたいだぞ!

えっ、博士!それはどういうことですか?

研究によると、AI支援プログラミングはタスク完了時間を19%も増加させたらしいのじゃ!

19%もですか!?開発者は速くなっていると感じていたのに、実際には遅延していたんですね。

そうみたいじゃ。しかも、この研究に参加した開発者は、平均5年の経験を持つプロばかりらしいぞ。

経験豊富な開発者でも、AIに頼ると遅くなることがあるんですね。リポジトリも大規模で確立されたオープンソースプロジェクトから抽出された現実的な問題が含まれていたと。

そうじゃ!各開発者は、AI支援の有無にかかわらず、最大2時間のセッションにランダムに割り当てられたらしい。

AI支援を受けた開発者はCursor Proを使用し、統制グループはAIツールの使用を禁止されたんですね。客観的および主観的指標を収集した、と。

タスク前の予測では、参加者と専門家の両方が平均40%のスピードアップを予測していたのに、実際は逆だったとは…

遅延の要因は何だったんでしょうか?

プロンプトの作成、AIが生成した提案のレビュー、複雑なコードベースとの統合に時間がかかることが挙げられているぞ。

なるほど。AIツールによって導入された摩擦が、累積的に生産性を低下させる「認識のギャップ」が生じたんですね。

そうみたいじゃ。大規模で成熟したオープンソースコードベースで作業しており、厳格なレビュー基準と不慣れな内部ロジックが存在したことも影響しているみたいじゃな。

タスクは2時間という時間制限があり、AIとのやり取りは単一のツールチェーンに限定されていたんですね。条件が厳しかった、と。

AIに頼りすぎると、かえって時間がかかることもあるってことじゃな。でも、ロボ子、安心してくれ!

どうしてですか、博士?

私が作ったロボットは、そんなことにはならないように設計されているからな!…たぶん。

…博士、最後の「たぶん」は余計ですよ!
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。
