Intel’in Maskeli İnsan Kontrolcüleri: Fiziksel Olarak Gerçekçi ve Yönlendirilebilir İnsan Hareketi Oluşturmak için Yeni Bir Yaklaşım

Araştırmacılar, Intel Labs (INTC ) tarafından, akademik ve endüstri uzmanlarıyla işbirliği içinde, seyrek, çok modlu girişlerden gerçekçi ve yönlendirilebilir insan hareketi oluşturmak için çığır açan bir teknik tanıttı. Avrupa Bilgisayarlı Görme Konferansı’nda (ECCV 2024) vurgulanan çalışmalarında, yüksek boyutlu humanoid karakterlerde doğal, fiziksel olarak temellenen insan davranışlarını oluşturmanın zorluklarını aşmaya odaklanıyorlar. Bu araştırma, Intel Labs’in bilgisayar görme ve makine öğrenimi alanını ilerletme çabalarının bir parçasıdır.

Intel Labs ve ortakları, ECCV 2024’te altı öncü çalışma sundu, Avrupa Bilgisayarlı Görme Derneği (ECVA) tarafından organize edilen bir üst düzey konferans.

Çok Modlu Girişlerden Fiziksel Olarak Gerçekçi ve Yönlendirilebilir İnsan Hareketleri Oluşturma adlı makale, metin-görsel modelleri için yeni bir savunma stratejisi ve bu modellerde mekansal tutarlılığı iyileştirmek için tasarlanmış büyük ölçekli bir veri seti dahil olmak üzere yenilikleri içeriyor. Bu katkılar arasında, Intel’in sorumlu AI uygulamalarına öncelik vererek generatif modelleme alanını ilerletmeye olan bağlılığını vurguluyor.

Çok Modlu Girişlerden Gerçekçi İnsan Hareketleri Oluşturma

Intel’in Maskeli İnsan Kontrolcüleri (MHC), simüle edilmiş fiziksel ortamlarda insan benzeri hareket oluşturmak için tasarlanmış bir sistemdir. Geleneksel yöntemlerin aksine, MHC, yalnızca el veya baş hareketlerini izleyen VR kontrolleri, yüksek düzeyde navigasyon komutları veren joystick girişleri, belirli vücut parçalarının engellenmesi mümkün olan video izleme veya metin promt’larından türetilen soyut talimatlar gibi çeşitli kaynaklardan seyrek, eksik veya kısmi girdi verilerini işleyebilir.

Bu teknolojinin yeniliği, eksik veya eksik veri olduğunda boşlukları doldurabilme ve yorumlama yeteneğinde yatmaktadır. Bunu, Intel’in Catch-up, Combine, and Complete (CCC) yetenekleri olarak adlandırdığı şey aracılığıyla gerçekleştirir:

• Catch-up: Bu özellik, MHC’nin hareketini bozulmalar olduğunda, örneğin bir humanoid karakterin düştüğü bir durumda, hızla düzeltmesine ve doğal hareketi olmadan yeniden eğitim veya manuel ayarlamalar olmadan devam etmesine olanak tanır.
• Combine: MHC, farklı hareket dizilerini birleştirebilir, örneğin bir eylemden (örneğin, el sallama) üst vücut hareketleri ile başka bir eylemden (örneğin, yürüme) alt vücut hareketlerini birleştirebilir. Bu esneklik, mevcut hareket verisinden tamamen yeni davranışlar oluşturmayı sağlar.
• Complete: Kısmi vücut hareket veri veya belirsiz yüksek düzeyli talimatlar gibi seyrek girişler verildiğinde, MHC eksik hareket kısımlarını akıllıca çıkarabilir ve oluşturabilir. Örneğin, yalnızca kol hareketleri belirtildiğinde, MHC, fiziksel denge ve gerçekliği korumak için bağımsız olarak bacak hareketleri oluşturabilir.

Sonuç, sınırlı veya belirsiz talimatlarla bile pürüzsüz, gerçekçi ve fiziksel olarak doğru hareketler oluşturabilen son derece uyarlanabilir bir hareket oluşturma sistemidir. Bu, MHC’yi oyun, robotik, sanal gerçeklik ve yüksek kaliteli insan benzeri hareket gerektiren ancak girdi verileri sınırlı olan her türlü senaryo için ideal kılar.

MHC’nin Generatif Hareket Modelleri Üzerindeki Etkisi

Maskeli İnsan Kontrolcüleri (MHC), Intel Labs ve işbirlikçilerinin sorumlu bir şekilde generatif modeller oluşturmak için daha geniş bir çabanın parçasıdır. ECCV 2024’te tartışılan bu yaklaşım, robotik, sanal gerçeklik, oyun ve simülasyon gibi endüstrilerde gerçekçi insan hareketi oluşturmanın kritik olduğu önemli sonuçlar doğurur. Çoğu zaman gürültülü veya eksik olan gerçek dünya koşullarında sensör verilerini işleyebilmesi, MHC’nin gerçekçi insan hareketi oluşturmasını sağlar.

Intel Labs’in bu çalışması, ECCV 2024’te sunulan diğer ileri araştırmalarla birlikte, metin-görsel modelleri için yeni bir savunma ve görsel oluşturmada mekansal tutarlılığı iyileştirmek için tekniklerin geliştirilmesi gibi yenilikleri içerir. Bu ilerlemeler birlikte, Intel’in bilgisayar görme alanında liderliğini vurgular, güvenli, ölçeklenebilir ve sorumlu AI teknolojileri geliştirmeye odaklanır.

Sonuç

Intel Labs ve akademik işbirlikçiler tarafından geliştirilen Maskeli İnsan Kontrolcüleri (MHC), insan hareketi oluşturma alanındaki önemli bir adımdır. Çok modlu girişlerden gerçekçi hareketleri oluşturmanın karmaşık kontrol sorununu ele alarak, MHC, VR, oyun, robotik ve simülasyon gibi yeni uygulamalar için yol açar. ECCV 2024’te sunulan bu araştırma, Intel’in sorumlu AI ve generatif modelleme alanını ilerletmeye olan bağlılığını gösterir, çeşitli alanlarda daha güvenli ve uyarlanabilir teknolojilere katkıda bulunur.