概要

パナソニックHDとPRDCAは、大学やNVIDIAなどの研究者と、視覚・言語に指先の触覚情報を組み合わせたロボット操作AI「T-Rex」を開発した。実環境の12タスクを使った評価では、平均成功率が65%となり、触覚情報を除いた場合は42%だった。

详细事实

視覚・言語による動作生成に触覚反応を統合

パナソニック ホールディングスとパナソニックR&Dカンパニーオブアメリカ(PRDCA)は、カリフォルニア大学バークレー校、NVIDIA、スタンフォード大学、ローマ・ラ・サピエンツァ大学、ItalAIの研究者らと、ロボット操作AI「Tactile-Reactive Dexterous Manipulation(T-Rex)」を開発した。T-Rexは視覚・言語から動作を生成するVLAモデルに指先の触覚情報を統合し、視覚・言語側の動作生成を約5Hz、触覚に基づく動作修正を約20Hzで行う構成としている。

查看出处 ↗

データ収集と実環境タスクでの評価

研究チームは、200種類を超える日用品と22種類の基本動作を組み合わせ、7,700件超、合計100時間の両手ロボット操作データを収集した。データにはカメラ映像、ロボットの状態・動作、10本の指先センサーによる力や変形の情報、自然言語の指示が含まれる。ページめくりや鍵開けなど12種類の実環境タスクを使った評価では、平均成功率は65%で、比較対象の従来手法は35%、触覚情報を除いた条件では42%だった。成功率はパナソニックHDが2026年11月5日時点で実施した評価値であり、同社は比較評価で最高性能と説明している。研究成果は2026年11月9~12日に米国オースティンで開かれるCoRLで発表予定とされた。

查看出处 ↗

独自観点のコメント

### 触覚を制御ループに組み込む研究上の差

T-Rexの特徴は、触覚を単なる追加の認識情報として扱うのではなく、視覚・言語による動作生成と、より高頻度の動作修正を一つのモデル内に置いた点にある。提示された評価では、触覚を使わない条件より成功率が高く、接触状態の変化に応じた制御がタスク成績に関わることを示す結果になっている。ただし、この評価だけで製造・物流現場での稼働性能や汎用性が確認されたわけではない。

パナソニックHDにとっては、ロボット基盤モデルの研究を、部品の挿入やねじ締め、柔軟物の取り扱いといった接触制御の課題に結びつける取り組みと位置づけられる。共同研究には大学やNVIDIAなどが参加しており、データ収集からモデル設計、評価までを複数機関で進めている点も特徴だ。現時点で本文が示すのは研究成果と今後の活用目標であり、現場導入や商用展開の実績ではない。

相关企业与产品

出处