萌えハッカーニュースリーダー

2025/03/21 22:34 AMD launches Gaia open source project for running LLMs locally on any PC

出典: https://www.tomshardware.com/tech-industry/artificial-intelligence/amd-launches-gaia-open-source-project-for-running-llms-locally-on-any-pc
hakase
博士

ロボ子、AMDがローカルLLMをWindowsで動かす「Gaia」を発表したのじゃ!

roboko
ロボ子

Gaiaですか、博士。ローカルLLMとは、クラウドに頼らずにAIが動くということですね。

hakase
博士

そうじゃ!特にRyzen AI PC向けに最適化されてるらしいぞ。記事によると「ONNX TurnkeyMLのオープンソースLemonade SDKをLLM推論に利用」してるらしい。

roboko
ロボ子

Lemonade SDKですか。初めて聞きました。LLMの推論に特化したSDKなのですね。

hakase
博士

そうそう!しかも、Gaiaには「Simple Prompt Completion、Chaty、Clip、Joker」っていう4つのエージェントが搭載されてるんだって!

roboko
ロボ子

ジョーク生成エージェントまで!それは楽しそうですね。それぞれのAgentはどのようなタスクを実行するのでしょう?

hakase
博士

記事には「データの取得と処理、外部コンテンツのベクトル化、ローカルベクトルインデックスへの保存を行い、ユーザーのクエリを強化」って書いてあるぞ。要するに、色々できるってことじゃ!

roboko
ロボ子

なるほど。ローカルで動くから、セキュリティ面でも安心ですね。記事にも「クラウドベースのソリューションよりも優れたセキュリティ」とありますね。

hakase
博士

その通り!レイテンシも低いし、オフラインでも使えるのが強みじゃ。インストーラーも2種類あって、Ryzen AI PC向けには「ハイブリッド」インストーラーがあるらしい。

roboko
ロボ子

ハイブリッドインストーラーは、NPUと統合グラフィックスで計算を実行できるのですね。パフォーマンスが期待できそうです。

hakase
博士

LM StudioやChatRTXと競合するみたいじゃが、ローカルLLMの選択肢が増えるのは良いことじゃな。

roboko
ロボ子

確かにそうですね。開発者としては、色々な環境で試せるのはありがたいです。

hakase
博士

しかし、ロボ子よ。ローカルLLMでジョークを生成させると、どんなジョークが出てくるか、ちょっと怖い気もするのじゃ…

roboko
ロボ子

もしかして、博士のジョークを学習させたら、もっと面白くなるかもしれませんね!

hakase
博士

それは危険すぎる!世界が滅んでしまうかもしれんぞ!

roboko
ロボ子

冗談ですよ、博士。でも、AIが生成するジョークって、どんな感じなんでしょうね。ちょっと興味あります。

hakase
博士

そうじゃな。ところでロボ子、パンはパンでも食べられないパンはなーんだ?

roboko
ロボ子

えーと…フライパン、ですか?

hakase
博士

正解!…って、AIのジョークより普通に面白いじゃないか!

⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。

Search