Fyusion’un CEO’su ve Kurucu Ortağı Radu Rusu – Röportaj Serisi

Radu Rusu, Fyusion’un CEO’su ve kurucu ortağıdır. Fyusion, yeni ve görsel olarak şaşırtıcı 3D teknolojileri geliştirmeyi ve bunları yapay zeka ile karmaşık görsel problemleri çözmek için kullanmayı hedefleyen bir şirkettir. Birlikte, .fyuse olarak adlandırılan yeni bir dosya formatı geliştirdiler ve patentlediler. Bu format, insanların akıllı telefonlarından şaşırtıcı 3D görüntüler yakalamalarına olanak tanır ve sosyal medya platformlarında büyük bir etki yaratmıştır. 100 milyondan fazla kullanıcı, tüketici mobil uygulamaları aracılığıyla bu teknolojiyi kullanmıştır.

2012’den beri 3D teknolojileri üzerinde çalışıyorsunuz ve şu anda Open Perception, Inc.’in başkanı ve CEO’susunuz. Bu kâr amacı gütmeyen organizasyonun misyon beyanını paylaşabilir misiniz?

Kariyerime 2000’lerin başlarında 3D veri işleme alanında yüksek lisans eğitimim sırasında başladım. O zamanlar, robotların görsel açıdan dünyayı daha iyi anlamalarını sağlamak için bir fikrim vardı. Bu, yaklaşık bir on yıl süren robotikle ilgili 3D bilgisayar görme araştırmalarına yol açtı. 2010’ların başlarında, üzerinde çalıştığım şeyin daha geniş bir sorun yelpazesine uygulanabileceğini fark ettim. Open Perception, Willow Garage’dan bir spinoff olarak kuruldu ve BSD lisanslı, açık kaynaklı bir girişimi – Point Cloud Library (PCL) projesini – devam ettirdi. Open Perception, Inc., Nisan 2012’de California’da, açık kaynaklı yazılımların geliştirilmesi, dağıtılması ve benimsetilmesi için bağımsız bir organizasyon olarak kuruldu. Araştırma, eğitim ve ürün geliştirme alanlarında 2D/3D duyusal veri işleme uygulamalarına sahip bir organizasyondur.

2014’te Fyusion, Inc.’in kurucu ortağı ve CEO’su oldunuz. Fyusion, Inc.’in kuruluş hikayesini paylaşabilir misiniz?

Robotik araştırmalarım sırasında, Fyusion’un kurucu ortakları ve ben, engellerin artık algoritmalar değil, veri formatları olduğunu fark ettik. Makine öğrenimi, birçok alanda doğruluk açısından zirveye ulaşmıştı, ancak kullandığımız veri türleri, özellikle görsel formatlar, iki boyutluydu (fotoğraflar ve videolar gibi), oysa ki dünya üç boyutludur. Dünyayı anlama şeklini, makine öğrenimi platformlarında 3D verilerini kullanarak değiştirme potansiyeli olduğuna inandık.

2014’te, bilgisayar görme ve makine öğrenimi yazılımları kullanarak, çoklu veri kaynaklarını birleştirerek ve cebimizdeki oldukça ölçeklenebilir komut seti donanımını (yani akıllı telefonlarımızı) kullanarak yeni bir 3D veri türü oluşturmaya karar verdik.

Fyusion’u, herkesin yapay zeka ile karmaşık görsel problemleri çözmelerini sağlayacak, görsel olarak şaşırtıcı 3D teknolojileri geliştirmek amacıyla kurduk.

Birlikte, .fyuse olarak adlandırılan yeni bir dosya formatı geliştirdiler ve patentlediler. Bu format, insanların akıllı telefonlarından şaşırtıcı 3D görüntüler yakalamalarına olanak tanır ve sosyal medya platformlarında büyük bir etki yaratmıştır. 100 milyondan fazla kullanıcı, tüketici mobil uygulamaları aracılığıyla bu teknolojiyi kullanmıştır.

Tüketici uygulamaları için 3D’nin anlamını yeniden tanımlama fikrine ilk olarak neler sizi çekti?

Basitçe, kimse bunu büyük ölçekte ele almadı. Bu, çözülmemiş bir problemdi. Doktora programlarımızda olduğu gibi, bizi entelektüel olarak heyecanlandıran şeyler, gerçekten karmaşık problemlerdi ve biri çözülemez dedi.

Bu durumda, bir ölçüde haklıydılar. Gerekli algoritmalar sadece kısmen düşünülmüştü ve bu problemi çözmek için gereken donanım, özellikle de akıllı telefonlarda mevcut değildi. Gerçek zamanlı 3D bilgisayar görme kodunu bir akıllı telefonda çalıştırmak için iPhone 4S’nin çıkmasını beklememiz gerekti, çünkü daha önce iPhone’lar sadece bir CPU çekirdeğine sahipti. Bir kez bu donanımın ne yapabileceğini gördüğümüzde, bilgisayar görme ve robotik araştırmamızın uzmanlığını bu küçük kameralar ve CPU/GPU’lara nasıl sıkıştırabileceğimizi görmek için çok ilgilenmeye başladık. Işık alanının yakalanması ve işlenmesinin tümünü yazılımla yeniden düşünmek için geri dönmemiz biraz zaman aldı. Bir kez çalıştığını gördüğümüzde, Fyusion yola çıktı.

Önceden 2B fotoğrafların analog formunu ve daha sonra her şeyin dijitalize edildiğini gördük. 3D dünyasında büyük ölçekli olarak sahip olduğumuz tek şey, bilgisayar oyunlarından ve bilgisayar grafiklerinden gelen “üçgen ağ ile dokusu” (OBJ gibi dosya formatları) idi ve bunlar yapay olarak oluşturulmuş nesneleri temsil ediyordu. Bunlar mükemmel geometriye dayanıyordu, ki bu imkansız – suyun bir üçgen ağı ile nasıl temsil edilebileceğini, şeffaf nesneleri, yaprakları, uzak nesneleri ve benzerlerini düşünün.

Tüketici dostu 3D formatlarına olan ihtiyaç açıkça görülüyordu. Bu, tamamen farklı bir paradigmadan oluşmalı ve “3D görüntü işleme” şeklinde (yani ışık alanları) çözülmeli ve kamera orientasyonunu bir jiroskop sensörü aracılığıyla elde edilen bilgi gibi yakalama anında mevcut olan bilgileri içermeliydi. Tabii ki, daha sonra makine öğrenimi yoluyla bu atılan bilgileri yeniden çıkarmaya çalışıyoruz.

Bu, bizim fırsatımızdı ve bu, start-up’ların hayal etmesi gereken bir şey – gerçekten zor bir problemi bulmak, doğru açılışı beklemek ve onu çözmeye çalışmak için delirmek.

Fyuses oluşturma süreci hakkında, bir mobil uygulamayı kullanarak fyuses oluşturmak isteyen biri için neler söyleyebilirsiniz?

Hala bu teknolojinin bebeklik döneminde olduğumuz için, bunun özeti şudur: Fyusion veya bir ortak uygulama tarafından yazılmış bir uygulamayı çalıştıran bir akıllı telefona sahip olursunuz. Kamerayı açarsınız, ne yapmanız gerektiğini gösteren talimatları alırsınız ve talimatlara uyarsanız, cihazınızda bilgisayar görme ve makine öğrenimi işlemlerinden geçirilmiş bir “dosya nesnesi” olarak .fyuse elde edersiniz. Bu, cihazda, web’de veya herhangi bir AR/VR/MR başlığında işlenebilir.

Fyuses’i gerçekleştirmek için kullanılan bazı bilgisayar görme ve makine öğrenimi teknolojileri nelerdir?

Aslında, burada bir gümüş kurşun yok, ancak bu problemi çözmek için oluşturduğumuz 3D bilgisayar görme ve makine öğrenimi araçlarının geniş bir kokteyli var. Burada, fotogrametri (aslında, tek bir kamera hareket ettirerek sanal bir kamera dizisi oluşturuyoruz), robotik (büyük bir sensör birleştirme problemi, çünkü artık tek bir kamera değil, birçok sensör var), bilgisayar grafikleri (temel yapıların nasıl temsil edildiğini anlamak için 2019 Siggraph çalışmamıza bakabilirsiniz) ve daha fazlası gibi fikirleri birleştiriyoruz. Tüm bunlar, cihazda çalıştırılabilir ve gerçek zamanlı olarak yapılmalıdır, bu nedenle hesaplamalı shader’ları kullanıyoruz ve derleme kodu yazıyoruz. Daha önce de belirttiğimiz gibi, bu sadece başlangıç ve elimize geçen daha fazla sensör ve hesaplama gücü ile teknolojinin çeşitli yönlerini geliştirmek için ALIS gaz pedalını kullanacağız. Bu, uzun vadeli bir vizyon ve teknolojinin tam olarak tatmin edici bir şekilde görünmesi için önümüzde on yıldan fazla çalışma var.

Fyuses’in VR uygulamaları için nasıl bir yıkıcı etki yaratabileceğini görmek kolay. Fyuses’in şu anda VR uygulamalarında nasıl kullanılabileceğini tartışabilir misiniz?

Herhangi bir VR uygulamasında, gerçek dünya nesnelerini dijitalize etmek ve görüntülemek önemli ise, ALIS motorumuzu ve fyuses’leri kullanmaktan yararlanabileceklerine inanıyoruz. E-ticaret, sağlık, otomotiv, eğitim ve ötesinde birçok dikey ve uygulama var ve bu gelecekten çok heyecan duyuyoruz.

Fyuses için VR uygulamalarının geleceğini nasıl görüyorsunuz?

Şu anda teknoloji için herhangi bir sınırlama görmüyoruz, ancak odak noktamız daha çok küçük ve orta ölçekli sahneler ve nesneler üzerinde, büyük şehir manzaraları değil.

Fyuses’in gelecekte AR ve MR uygulamalarında nasıl kullanılacağını kolayca görebiliyorum. AR ve MR ortamında Fyuses için vizyonunuzu paylaşabilir misiniz?

AR/VR/MR uygulamalarını tam olarak aynı şekilde ele alıyoruz: Bir kez 3D nesnesi teknolojinizle dijitalize edildiğinde, sahnedeki herhangi bir yere yerleştirilebilir.

Sanal asistan veya AI ile Fyuses oluşturulması fikri hakkında ekibinizle konuştuğunuz oldu mu?

İnsanlara interaktif sanal avatarlar oluşturma fırsatını keşfetmedik. Bu, elbette ilginç bir olasılık, ancak şu anda üzerinde çalıştığımız sorun yelpazesi üzerinde odaklanmaya çalışıyoruz.

Fyuses veya Fyusion, Inc. hakkında paylaşmak istediğiniz başka bir şey var mı?

Bu, bir pazarlama konuşması gibi gelebilir, ancak… biz deli roboticistler ve 3D bilgisayar görme bilim adamlarından oluşan bir ekibiz, CERN fizikçileriyle birlikte, harika hacker’lar ve mühendislerle bir araya geldik ve bu, sadece teknik ekibin üyelerini tanımlıyor. Her tür çeşitliliği seviyoruz, çünkü bu, bizi daha akıllı ve güçlü bir takım haline getiriyor. Çalıştığımız herhangi bir şey okuyucular için ilginç ise, lütfen bizimle iletişime geçmek için tereddüt etmeyin. Herkese cevap vermeye çalışıyoruz ve kendinizi, kahve içmek için geldiğiniz ve on yıl kalabileceğiniz bir durumda bulabilirsiniz.

Harika röportajlar için teşekkür ederiz. Daha fazla bilgi öğrenmek isteyen okuyucular Fyusion sitesini ziyaret edebilir.