インテルのマスクヒューマノイドコントローラー：物理的にリアルな人間の動きを生成するための新しいアプローチ

インテル研究所の研究者は、学術界や産業界の専門家と共同で、スパースなマルチモーダル入力からリアルな人間の動きを生成するための画期的な技術を紹介しました。彼らの研究は、インテル研究所とヨーロッパコンピュータビジョン会議（ECCV 2024）でハイライトされ、高次元ヒューマノイドキャラクターで自然な物理ベースの人間の行動を生成する課題を克服することに焦点を当てています。この研究は、インテル研究所がコンピュータビジョンと機械学習を進歩させるためのより広範な取り組みの一部です。

インテル研究所とそのパートナーは最近、ECCV 2024で6つの最先端の論文を発表しました。これは、ヨーロッパコンピュータビジョン協会（ECVA）によって組織されたプレミア会議です。

論文マルチモーダル入力から物理的にリアルな人間の動きを生成するでは、テキストからイメージモデルのプロンプトベースのレッドチーム攻撃から保護するための新しい防御戦略や、空間的一貫性を改善するための大規模データセットの開発など、革新的な技術が紹介されています。これらの貢献の中で、論文は、インテルが生成モデルを進歩させることへの取り組みと、責任あるAIの実践への重点を強調しています。

マルチモーダル入力からリアルな人間の動きを生成する

インテルのマスクヒューマノイドコントローラー（MHC）は、シミュレートされた物理環境で人間のような動きを生成するための画期的なシステムです。従来の方法が完全なモーションキャプチャーデータに大きく依存するのに対し、MHCはスパースな、不完全な、または部分的な入力データをさまざまなソースから処理するように設計されています。これらのソースには、VRコントローラー、ジョイスティック入力、ビデオ追跡、またはテキストプロンプトから抽出された抽象的な指令が含まれる場合があります。

この技術の革新性は、データが欠けているまたは不完全な箇所を解釈し、補う能力にあります。これは、インテルが「キャッチアップ、結合、完了（CCC）」と呼ぶ機能を通じて実現されます：

• キャッチアップ：この機能により、MHCは動作の断絶が発生した場合（たとえば、ヒューマノイドキャラクターが倒れた場合）、動作を回復し、同期をとることができます。システムは、再訓練や手動調整を行わずに、自然な動作をすぐに再開できます。
• 結合：MHCは、異なる動作シーケンスを組み合わせることができます。たとえば、上半身の動きを一つのアクション（例：手を振る）から、下半身の動きを別のアクション（例：歩く）から組み合わせることができます。この柔軟性により、既存の動作データから全く新しい行動を生成することが可能になります。
• 完了：スパースな入力（たとえば、部分的な体の動きデータまたは漠然とした高レベルの指令）が与えられた場合、MHCは知的に欠けている動作の部分を推論し、生成することができます。たとえば、腕の動きのみが指定された場合、MHCは物理的なバランスとリアリズムを維持するために、自動的に足の動きを生成することができます。

結果として、MHCは非常に適応性の高い動作生成システムとなり、入力データが限られている場合でも、スムーズでリアルな物理的に正確な動作を生成することができます。これにより、MHCは、ゲーム、ロボティクス、仮想現実、または人間のような動作が必要だが入力データが制限されるようなシナリオでの応用に最適な選択となります。

MHCが生成モーションモデルに与える影響

マスクヒューマノイドコントローラー（MHC）は、インテル研究所とそのコラボレーターが責任ある生成モデルを構築する取り組みの一部です。ECCV 2024で議論されたように、このアプローチは、ロボティクス、仮想現実、ゲーム、シミュレーションなどの産業で、リアルな人間の動作の生成が重要な意味を持つ、重大な影響を及ぼします。マルチモーダル入力と、動作の無断な切り替えを可能にすることで、MHCは、センサーデータがノイズまたは不完全な場合でも、現実世界の条件に対処することができます。

この研究は、ECCV 2024で発表された他の先端研究と並んでいます。インテル研究所のテキストからイメージモデルの新しい防御戦略や、画像生成の空間的一貫性を改善するための技術の開発などです。これらの進歩は、インテルがコンピュータビジョンの分野でリーダーシップを発揮していることを示しています。セキュアでスケーラブルで責任あるAIテクノロジーの開発に焦点を当てています。

結論

インテル研究所と学術的コラボレーターによって開発されたマスクヒューマノイドコントローラー（MHC）は、人間の動作生成の分野における重要なステップを表しています。マルチモーダル入力からリアルな動作を生成する複雑な制御問題に取り組むことで、MHCは、VR、ゲーム、ロボティクス、シミュレーションなどの新しいアプリケーションの道を開きます。ECCV 2024で紹介されたこの研究は、インテルが責任あるAIと生成モデルを進歩させることへの取り組みを示しています。様々な分野でより安全で適応性の高いテクノロジーに貢献しています。