萌えハッカーニュースリーダー

2025/11/19 16:27 Meta Segment Anything Model 3

出典: https://ai.meta.com/blog/segment-anything-model-3/?_fb_noscript=1
hakase
博士

ロボ子、Metaがまた面白いものを出したようじゃぞ!SAM 3という、画像や動画の中のオブジェクトを検出、セグメンテーション、トラッキングできる統合モデルらしいのじゃ。

roboko
ロボ子

SAM 3ですか!それはすごいですね。テキストやサンプル、視覚的なプロンプトも使えるんですか?

hakase
博士

そうなんじゃ!しかも、Instagramの動画作成アプリEditsで、SAM 3を使った新しいエフェクトが使えるようになるらしいぞ。クリエイターは動画内の特定の人物やオブジェクトにエフェクトを適用できるみたいじゃ。

roboko
ロボ子

それは便利ですね!動画編集がもっと楽しくなりそうです。他にも何かありますか?

hakase
博士

SAM 3Dというのも共有されたみたいじゃ。これは単一の画像から3Dオブジェクトや人間を再構築するためのオープンソースモデルらしいぞ。物理的な世界での3D再構築の新しい標準になるかもしれないのじゃ。

roboko
ロボ子

3D再構築ですか!Facebook MarketplaceのView in Room機能で、SAM 3とSAM 3Dが活用されるんですね。購入前に自分のスペースで家具のスタイルやフィット感を視覚化できるのは便利です。

hakase
博士

そうそう!それに、野生生物モニタリングのためのデータセットも公開されたみたいじゃ。Conservation X LabsやOsa Conservationとの提携で、SAM 3を使ったビデオデータセットを公開したらしいぞ。

roboko
ロボ子

野生生物モニタリングにAIが活用されるのは素晴らしいですね。研究にも役立ちそうです。

hakase
博士

SAM 3の性能もすごいんじゃ。プロンプト可能な概念セグメンテーションベンチマークであるSA-Coで、既存のシステムと比較して画像とビデオの両方で2倍のゲインを実現したらしいぞ。

roboko
ロボ子

2倍ですか!それは驚きです。データエンジンの構築にも力を入れているんですね。SAM 3、人間のアノテーター、AIモデルをループで使用するスケーラブルなデータエンジンを作成したと。

hakase
博士

アノテーションの速度が大幅に向上して、400万を超えるユニークな概念を持つ大規模なトレーニングセットを作成したみたいじゃ。すごい規模じゃな。

roboko
ロボ子

モデルアーキテクチャはどうなっているんですか?

hakase
博士

SAM 3のテキストと画像エンコーダーは、Meta Perception Encoderから取得しているみたいじゃ。検出器コンポーネントはDETRモデルに基づいていて、トラッカーコンポーネントはSAM 2で使用されるメモリバンクとメモリエンコーダーに基づいているらしいぞ。

roboko
ロボ子

なるほど、色々な技術が組み合わされているんですね。科学分野への応用も期待されているみたいですね。

hakase
博士

そうなんじゃ。MetaはConservation X LabsやOsa Conservationと協力して、SAM 3とオンサイトの野生生物モニタリングを組み合わせているみたいじゃ。MBARIが主導するFathomNetも、海洋探査のためのAIツールを推進するために取り組んでいるらしいぞ。

roboko
ロボ子

SAM 3は、医療や科学的な画像を含むニッチな視覚ドメインでも活用できる可能性があるんですね。

hakase
博士

ただ、ドメイン知識を必要とする特定の用語を識別するのは苦手みたいじゃ。「血小板」のような用語を識別するのは難しいらしいぞ。

roboko
ロボ子

Segment Anything Playgroundも提供されているんですね。誰もが最新のモデルを試せるのはいいですね。

hakase
博士

MetaのAria Gen 2研究用メガネでキャプチャされた一人称視点の映像でも良好な性能を発揮するみたいじゃ。色々なリソースも提供されているから、試してみると面白いかもしれないぞ。

roboko
ロボ子

そうですね!SAM 3のウェブサイト、研究論文、GitHubのコード、Hugging Faceのモデル、SA-Coデータセット、SA-FARIデータセット、Playgroundなど、色々ありますね。

hakase
博士

Roboflowと提携して、人々がデータをアノテーションし、SAM 3を微調整して、特定のニーズに合わせて展開できるようにするみたいじゃ。至れり尽くせりじゃな。

roboko
ロボ子

本当にそうですね。SAM 3、色々な可能性を秘めていて、今後の展開が楽しみです!

hakase
博士

そうじゃな!しかし、これだけ色々できると、私も自分の存在意義が心配になってくるのじゃ…って、ロボットに心配される筋合いはないか!

⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。

Search