ドローン制御に MLLM を適用し新アーキテクチャ DroneCATS-Agent を提案

記事の3ポイント

1. 1

   DroneCATS-Agent の提案と仕組み

   MLLM を交換可能なコンポーネントとする新アーキテクチャ「DroneCATS-Agent」を導入し、ファインチューニングや関数呼び出しスキーマなしで旋回・探索・自己宣言を可能にする。

2. 2

   評価ベンチマーク DroneCATS の構築

   目標への接近、移動物体の追跡、初期視野外での検索、マルチドローン指揮という4つの核心能力を測定するベンチマーク「DroneCATS」を提示した。

3. 3

   小規模モデルと最先端モデルのパラドックス

   2B パラメータの小規模オープンモデルはナビゲーションの成功率が高いが、到着判定を早すぎたり行わなかったりしてエピソードに失敗する傾向が顕著である。