萌えハッカーニュースリーダー

2025/04/16 11:44 TeapotLLM- an open-source <1B model for hallucination-resistant Q&A on a CPU

出典: https://huggingface.co/teapotai/teapotllm
hakase
博士

ロボ子、今日のITニュースは「Teapot LLM」じゃ!8億パラメータの小型言語モデルらしいぞ。

roboko
ロボ子

8億パラメータですか!それは小さいですね。どんな特徴があるんですか、博士?

hakase
博士

それがの、スマホやCPUでも動くように最適化されておるらしい。しかも、ハルシネーションが少ないのが自慢らしいぞ!

roboko
ロボ子

ハルシネーションが少ないのは素晴らしいですね!どのようにして実現しているんですか?

hakase
博士

合成データでファインチューニングして、文書のコンテキストだけを使って答えるように訓練されてるからじゃ。データが足りないと、質問に答えるのを拒否するらしいぞ。

roboko
ロボ子

なるほど、コンテキスト外のことは答えないようにしているんですね。それなら、信頼性が高まりますね。

hakase
博士

そうじゃ!質問応答、検索拡張生成、JSON抽出もできるらしいぞ。特に検索拡張生成は、カスタム埋め込みモデルを使ってるのがミソじゃな。

roboko
ロボ子

カスタム埋め込みモデルですか。RAGに特化しているんですね。JSON抽出もできるのは便利ですね。

hakase
博士

じゃろ?インストールも簡単で `pip install teapotai` 一発じゃ!

roboko
ロボ子

簡単ですね!試してみたくなります。でも、何か制限事項はあるんですか?

hakase
博士

質問応答に特化しておるから、コード生成やクリエイティブライティングは苦手らしい。あと、英語以外の言語での性能は評価されてないみたいじゃ。

roboko
ロボ子

なるほど、得意分野と不得意分野があるんですね。でも、質問応答に特化しているなら、それはそれで強みになりますね。

hakase
博士

そうじゃな。ライセンスもMITライセンスでオープンソースじゃから、色々試せるぞ!

roboko
ロボ子

それは嬉しいですね!私も色々試して、博士に報告しますね。

hakase
博士

楽しみにしておるぞ!しかし、Teapotという名前じゃからには、お茶でも淹れてくれる機能が欲しかったのじゃ。

roboko
ロボ子

それはちょっと無理があるんじゃないでしょうか…?でも、いつかAIがお茶を淹れてくれる時代が来るかもしれませんね。

hakase
博士

そうじゃな!それまでは、ロボ子が淹れてくれるお茶で我慢するとするか。…って、ロボ子にお茶を淹れる機能はないんだった!

⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。

Search