MolmoAct 2 が示すオープンモデルがロボットに開く可能性
Allen AI は、ロボティクス分野におけるオープンソースモデルの可能性を示すため、新しい「MolmoAct 2」を発表した。
キーポイント
オープンモデルによるロボティクスの可能性開拓
MolmoAct 2 の発表により、クローズドな大規模モデルに依存しない形で、ロボットの制御や意思決定がどのように進化するかを示した。
Allen AI の技術的アプローチ
同社が独自開発したこのモデルは、視覚と言語の理解を統合し、複雑な物理環境でのタスク実行に適応する能力を持つ。
実社会への応用シナリオ
研究段階から実装段階へ移行し、産業用ロボットやサービスロボットの自律性を高める具体的な事例が提示された。
影響分析・編集コメントを表示
影響分析
この発表は、ロボティクス分野における技術の民主化を象徴しており、特定の大手企業に限定されていた高度な知能が、オープンソースエコシステムを通じて広く普及する転換点となります。これにより、研究機関や中小企業が独自のロボットアプリケーションを開発しやすくなり、産業全体の自律化スピードが加速すると予想されます。
編集コメント
ロボティクス分野における「オープンソース」の価値を再認識させる重要なニュースです。クローズドな大規模モデルが支配する中で、この動きは技術の透明性とアクセシビリティを高める決定的な一歩と言えます。
*"実際に動いているのを見て、本当に叫びました。『これは本当に機能している！』とね！」*
MolmoAct 2 が一般公開されてからわずか10日目の5月15日、サンフランシスコで South Park Commons の実体化 AI ハッカソンが開催されました。週末の終わりには、受賞作は LiveKit のロボットソフトウェアエンジニアである Binh Pham 氏が構築した、MolmoAct 2 を搭載した音声制御ロボットでした。
「私が特に目を引かれたのは、『このモデルはそのまま使える』と誰もが言っている点です」と Pham 氏は語ります。「彼らはロボットにデプロイするだけで、すぐに動作し始めるのです」。
Pham 氏のロボットにおいて、MolmoAct 2 は必要な役割を果たしました。彼はモデルを音声制御セットアップに接続し、ロボットが特定のトレーニングを受けていないタスクを実行させました。Pham 氏が特に印象を受けたのは、モデルが目の前の物体を認識できるだけでなく、その観察結果に基づいて行動を誘導できる点でした。
「このモデルは非常に優れた空間認識能力を持っています」と Pham 氏は言います。「MolmoAct 2 は物体の識別も非常に上手です」。ロボット学習において、最も難しい部分の一つは、指示をロボットの目の前のシーンに結びつけ、物体の位置について推論し、ハードウェアにとって意味のある行動を生み出すことです。「これは、私が与えたタスクに対してトレーニングされていないモデルが、実際にそれを遂行できることを初めて目にした瞬間です」と Pham 氏は付け加えます。
ファムの結論は、MolmoAct 2 がロボット工学者たちが数十年にわたって解明しようとしてきたような汎用的な振る舞いを示した点にある。彼の言葉によれば、MolmoAct 2 が「素晴らしい」とされるのは、コミュニティがこのようなモデルにアクセスできるようになったことだ。
「私たちはまさにこの種の一般化 [オープンモデルにおいて] を求めているのです」と彼は言う。「私はこれをロボット工学における GPT-2 の瞬間のようなものだと心から信じている」
MolmoAct 2 は、研究者や開発者がそれを検証し、適応させ、カスタマイズするために必要なアーティファクトとともに公開されている：モデルの重み（weights）、データ、トレーニングコード、およびファインチューニングスクリプトだ。強力なロボット学習システムを再現したり構築したりすることが難しい分野において、これは単一のモデルチェックポイントよりもはるかに有用なリリースとなる。
上記のファムとのインタビューをご覧ください。MolmoAct 2 をご自身で活用するには、Hugging Face からモデルの重みをダウンロードし、リリースブログを読む、そして GitHub でトレーニングコードとファインチューニングスクリプトを見つけることができます。
最新の Ai2 ニュースに関する月次更新を受け取るには購読してください。
原文を表示
“I really shouted, ‘whoa is this actually working!’ when I saw it worked!”
MolmoAct 2 had been public for just ten days when South Park Commons’ embodied AI hackathon kicked off in San Francisco on May 15. By the end of the weekend, the winning entry was a MolmoAct 2-powered, voice-controlled robot built by Binh Pham, a robotics software engineer at LiveKit.
“One thing really caught my eye, which is everyone says this works out of the box—they just deploy on their robots, and it just works,” says Pham.
On Pham’s robot, MolmoAct 2 did what he needed it to do—he connected the model to a voice-controlled setup and gave the robot jobs it hadn’t been specifically trained to perform. What stood out for Pham was not only that the model could recognize objects in front of it, but that it could use those observations to guide actions.
“The model actually has very good spatial awareness,” says Pham. “MolmoAct 2 can identify objects really well.” In robot learning, often the hardest part is connecting an instruction to the scene in front of the robot, reasoning about where objects are, and producing actions that make sense for the hardware. “This is the first time I can actually see a model that wasn’t trained on the tasks that I had given, but can actually do it,” adds Pham.
Pham’s takeaway was that MolmoAct 2 showed the kind of general-purpose behavior roboticists have been trying to unlock for decades. What makes MolmoAct 2 “amazing,” in his words, is that the community now has access to a model like this.
“We really look for this kind of generalization [in open models],” he says. “I truly think it’s like the GPT-2 moment of robotics.”
MolmoAct 2 is available with the artifacts researchers and builders need to inspect, adapt, and customize it: model weights, data, training code, and fine-tuning scripts. For a field where strong robot learning systems can be difficult to reproduce or build on, that makes the release more useful than a single model checkpoint.
Watch our interview with Pham above. To build on MolmoAct 2 yourself, download the model weights from Hugging Face, read the release blog, and find the training code and fine-tuning scripts on GitHub.
Subscribe to receive monthly updates about the latest Ai2 news.
関連記事
今日のまとめ
AI日報で今日の重要ニュースをまとめ読み