大学(共同研究)
産業用ロボットアームを動かすフィジカルAIを実現
大学との共同研究として、人の「意図」と「動作」を映像から学習し、ロボットに判断と動作を転移する世界モデル(WFM)/フィジカルAIを開発。物流や製造・工場等の判断・意図を伴う現場オペレーションを学習させたモデルを現実世界のロボットアームに転移させ、実際の動作化を実証しました

大学との共同研究として、人の「意図」と「動作」を映像から学習し、ロボットに判断と動作を転移する世界モデル(WFM)/フィジカルAIを開発。物流や製造・工場等の判断・意図を伴う現場オペレーションを学習させたモデルを現実世界のロボットアームに転移させ、実際の動作化を実証しました
リアルな現場で発生する特定専門業務の「人の意図と動き」を理解し実現する応用として、世界モデル(WFM: World Foundation Model)を活用したフィジカルAIの研究開発を大学との共同研究で行っています。
課題
- 特定専門業務が人の「意図」と「動き」に依存(専門工程や品質チェック等の自動化が困難)
アプローチ
Input:空間での人の判断・動きを学習
人間作業の「意図」と「動作」を映像でAIが学習し、現場での3D世界を理解します。
Output:ロボットに判断と動作を転移
人の「意図」と「動作」をロボシミュレートし現実で実現。意図&動作を転移学習し、専門工程や品質チェック等への応用を目指します。
成果
- 人間作業の「意図」と「動作」を映像でAIが学習(現場での3D世界を理解)
- 人の判断・動作をロボットに転移(ロボシミュレートし現実で実現)
- Pick and Place等の基本動作を現実世界で確認(所定のボックスに入れる/特定領域に精密に置く/異質なものは除外する)
Region
APAC 日本