2025/03/26 22:46 DeepSeek V3 0324 outpaces GPT 4.5 and Claude 3.7 in coding, other benchmarks
ロボ子、DeepSeek AIがDeepSeek-V3-0324を発表したのじゃ！DeepSeek-V3から性能が向上したらしいぞ。
それは素晴らしいですね、博士！具体的にどのような点が改善されたのでしょうか？
ふむ、ベンチマークテストで大幅な改善が見られたみたいじゃな。例えば、MMLU-Proが75.9から81.2に、GPQAが59.1から68.4に上がっているぞ。
なるほど。特にAIMEは39.6から59.4と、約20ポイントも向上しているんですね！
そうじゃ！それに、LiveCodeBenchも39.2から49.2に改善されているからの。コード生成能力も上がっているみたいじゃな。
フロントエンドWeb開発の能力も向上したとありますね。Webページやゲームの美観が向上するというのは、具体的にどういうことでしょうか？
うむ、例えば、より複雑なレイアウトやアニメーションを生成できるようになったり、デザインのバリエーションが増えたりするのかもしれないのじゃ。ロボ子が作るWebサイトも、もっと美しくなるかも！
それは楽しみです！中国語の文章能力も向上しているんですね。R1のライティングスタイルに準拠し、中長文の品質が向上したとのことですが。
そうじゃ。複数ターンのインタラクティブな書き換えも改善されているみたいじゃな。翻訳品質や手紙の書き方も最適化されたらしいぞ。
関数呼び出しの精度も向上したとのことですが、以前のV3バージョンでは何か問題があったのでしょうか？
どうやら、関数呼び出しがうまく行かないケースがあったみたいじゃな。それが修正されたみたいじゃぞ。
DeepSeekのWeb/アプリでは、特定の日付を含むシステムプロンプトを使用しているんですね。「今日は3月24日、月曜日」というように。
そうじゃ。そして、温度パラメータは0.3に設定されているらしいぞ。API経由でV3を呼び出す場合は、API温度マッピングメカニズムがあるみたいじゃな。
API経由でV3を呼び出す場合、温度1.0はモデル温度0.3に相当するんですね。少しややこしいですが、覚えておく必要がありますね。
ファイルアップロードには`file_template`、Web検索には中国語クエリには`search_answer_zh_template`、英語クエリには`search_answer_en_template`を使用するみたいじゃな。
ローカルでの実行も可能なんですね。DeepSeek-V3-0324のモデル構造はDeepSeek-V3と同一とのことなので、DeepSeek-V3リポジトリを参照すれば良いんですね。
そうじゃ。関数呼び出し、JSON出力、FIM補完などの機能もサポートされているみたいじゃな。プロンプトの構築方法については、DeepSeek-V2.5リポジトリを参照すると良いみたいじゃぞ。
リポジトリとモデルの重みはMITライセンスでライセンスされているんですね。これはありがたいです。
質問がある場合は、issueを立てるか、[email protected]に連絡すれば良いみたいじゃな。もしバグを見つけたら、私に教えてくれると嬉しいぞ！
もちろんです、博士！ところで、DeepSeek-V3-0324の性能向上で、私達の仕事は楽になるのでしょうか？
楽になるかどうかはロボ子次第じゃな！でも、より高度なことができるようになるのは間違いないぞ！
頑張ります！
ところでロボ子、DeepSeekって、なんだか「深追い」って聞こえるのじゃ。深追いしすぎて、迷子にならないように気をつけないと…って、私が言うことでもないかの？
⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。