Stephen Miller, Co-Fondator și SVP de Inginerie la Fyusion – Seria de Interviuri

Stephen Miller este co-fondator și SVP de Inginerie la Fyusion, o companie de imagistică 3D și viziune computerizată, parte a grupului Cox Automotive. Înainte de a fonda Fyusion, a fost student doctorand la Universitatea Stanford, studiază știința calculatoarelor și a lucrat la robotica personală, cum ar fi împăturirea rufelor și legarea nodurilor chirurgicale în timpul studiilor sale de licență la UC Berkeley. El este un fellow al programului Google (GOOGL ) Hertz, fellow al programului SAP Stanford Graduate și fost fellow al programului NSF.

Ne puteți explica ce este Fyusion și cum permite capturarea și vizualizarea ușoară a datelor 3D?

Fyusion este o companie de viziune computerizată care oferă experiențe 3D conduse de inteligență artificială. Ne permitem oamenilor să capteze imagini 3D prin intermediul unei aplicații simple pentru smartphone care rulează pe majoritatea dispozitivelor Android și iOS. Aplicația are o ghidare pas cu pas și este proiectată pentru a fi utilizată de oricine, indiferent de abilitățile tehnice. Capturarea imaginii durează aproximativ un minut sau două. De acolo, motorul nostru de inteligență artificială, ALIS, poate analiza imagini 3D și transforma datele vizuale în informații actionabile. În prezent, ne concentrăm pe utilizarea imaginilor 3D pentru a diagnostica deteriorările exterioare ale mașinilor.

Ne puteți explica cum algoritmii utilizează formatul de fișier .fyuse pentru a permite unei camere de smartphone să creeze imagini 3D?

Îmi este de ajutor să consider formatul .fyuse alături de fotografii și videoclipuri. O fotografie capturează un moment în timp dintr-un unghi fix, iar un videoclip capturează o serie de astfel de momente într-un timeline liniar. În schimb, o imagine .fyuse capturează ceea ce numim “un moment în spațiu”. Un spectator nu este limitat la un singur unghi sau la un timeline liniar: poate vedea nu numai o parte a unui obiect, ci și în jurul lui.

Pentru a crea o imagine .fyuse, fotograful înconjoară subiectul într-o direcție cu o cameră de telefon mobil. Alternativ, tehnologia Fyusion este, de asemenea, compatibilă cu soluții de imagistică fixă și soluții de imagistică neconvenționale, cum ar fi dronele.

Formatul nostru de fișier .fyuse este ceea ce aduce aceste imagini la viață. Este ușor și permite interactivitate complexă și multifacetată. Este, de asemenea, complet compatibil cu laptopuri, tablete și smartphone-uri pe care utilizatorul obișnuit le are deja în arsenal.

Ne puteți discuta despre unele dintre datele care sunt capturate și analizate cu Fyusion?

În ceea ce privește mașinile, ALIS recunoaște fiecare parte a vehiculului și poate determina unde există deteriorări, mărimea și gravitatea deteriorărilor și poate elimina potențialele false pozitive, cum ar fi noroiul ridicat de pe drum. Tehnologia pe care am dezvoltat-o și am brevetat-o poate rezolva și alte probleme, dar aceasta este cea la care ne concentrăm în prezent.

Ne puteți discuta despre ce este Suita de Informații Lightfield bazată pe Inteligență Artificială (ALIS)?

ALIS este motorul din spatele fiecărui produs Fyusion. Permite imagistică 3D ușoară și înțelegere vizuală profundă. Există trei părți care alcătuiesc ALIS: Captură, Motor și Vizualizator. În modulul de captură, aplicația mobilă conține tutoriale încorporate și fluxuri de lucru personalizabile care permit utilizatorilor să capteze imagini 3D de înaltă calitate utilizând majoritatea smartphone-urilor de pe piață. Captura de imagini Fyusion suportă, de asemenea, camere DSLR, drone și o serie de alte dispozitive.

În a doua etapă, Motor, ALIS analizează aceste imagini 3D și le transformă în informații actionabile, cum ar fi tipurile de deteriorări solicitate de clienții noștri. De asemenea, poate oferi dovezi pentru constatările sale prin crearea de imagini 2D de înaltă rezoluție ale deteriorărilor pe care le găsește.

În cele din urmă, Vizualizatorul afișează formatul de fișier .fyuse. Formatul .fyuse este brevetat și ușor și oferă o experiență 3D imersivă cu timp de încărcare rapid. Putem anexa tot felul de experiențe la un fișier .fyuse, inclusiv audio, videoclipuri și, desigur, imagini 2D.

Fyusion este atât gata pentru realitatea augmentată, cât și pentru realitatea virtuală, cât de mare credeți că vor fi aceste aplicații în viitor?

Realitatea augmentată este o industrie de un miliard de dolari care devine din ce în ce mai mainstream, și este și mai ușor să capturați împrejurimile în 3D datorită noilor dispozitive mobile puternice și rețelelor cu latență scăzută. Pe măsură ce aceste tehnologii se vor muta în mainstream, așteptările clienților de experiențe online vor crește la fel de repede cum pot ține pasul creatorii de conținut.

În special în industria auto, cu cumpărarea de mașini din ce în ce mai mult online, în următorii ani ne așteptăm la o creștere a interesului pentru AR, VR și liste 3D. Scopul este de a transforma o pagină de detalii ale vehiculului (VDP) într-o pagină de experiență a vehiculului (VEP), ajutând atât dealerii auto mari, cât și pe cei mici să continue să prospere. Acest lucru poate fi orice, de la adăugarea de logo-uri 3D și etichete de media bogate pe liste, până la permiterea cumpărătorilor să plaseze virtual un set de bastoane de golf în portbagajul unei mașini pentru a vedea cum se potrivesc în interior.

Va fi interesant să vedem cum aceste tipuri de aplicații vor începe să intre în uzul curent. Nu cred că va dura mult.

Ne puteți discuta despre îmbunătățirea ratei de clic și a veniturilor care se observă în comerțul electronic din utilizarea imaginilor 3D în loc de imagini 2D?

Sunt cel mai familiarizat cu vânzările de gros și cu detailismul auto. Imaginile 3D au creat un nou nivel de încredere pentru cumpărătorii online, ceea ce este deosebit de critic pentru articolele de mare valoare, cum ar fi mașinile.

Datele noastre interne indică faptul că imaginile 3D cresc implicarea utilizatorilor și timpul petrecut pe paginile de detalii ale vehiculului, ceea ce, la rândul său, a fost demonstrat că crește vânzările de mașini. Furnizarea unei experiențe 3D realiste a vehiculului construiește, de asemenea, un sentiment pozitiv față de vânzător prin creșterea încrederii.

Una dintre opțiunile cu Fyusion este de a procesa datele local sau în cloud, ne puteți discuta despre beneficiile fiecăruia?

Local, inteligența artificială de margine obligă dezvoltatorii să lucreze în cadrul unor constrângeri considerabile, în special pentru cazul de utilizare al telefoanelor mobile. Pe lângă preocupările standard pentru orice dezvoltator de inteligență artificială – cât de optimizată este rețeaua? Cât de fiabile sunt rezultatele? – anumite preocupări practice stabilesc plafoane clare. Presiunea asupra memoriei, consumul de baterie, posibilitatea ca procesul dvs. să fie pus în fundal de către utilizator sau sistemul de operare etc. Și aceasta presupunând că procesoarele și unitățile de procesare grafică (GPU) comparabile sunt disponibile pe margine. Chiar și pentru dispozitivele de top, acest lucru este rareori cazul.

Trebuie să planificați pentru fiecare caz posibil; în timp ce, în cloud, orice soluție poate fi monitorizată și reglată.

Dar, vorbind colectiv, inteligența artificială de margine poate fi considerată o soluție “autoscaling” perfectă: pentru fiecare nou utilizator, aveți o mașină complet nouă la dispoziție. Dacă ați optimizat rețeaua pentru a rula complet pe margine, puteți servi cu ușurință doi clienți sau două milioane de clienți.

În timp ce cel mai puternic hardware va exista întotdeauna în cloud, este în general acceptat că datele sunt regele. Cu cât mai multe date și cu cât mai aproape de brut, cu atât mai bine. Inteligența artificială de margine are acces la date de intrare brute, neprocesate, fără restricții. În timp ce, pentru o soluție de inteligență artificială în cloud, datele de intrare trebuie să fie procesate (comprimate, parțiale) sau uriașe, în acest caz, lățimea de bandă devine o problemă serioasă.

Deoarece este cel mai aproape de utilizator, inteligența artificială de margine deschide o serie de posibilități pe care inteligența artificială în cloud nu le are. Dacă este optimizată pentru a rula în timp real, poate oferi feedback în timp real. Ceea ce înseamnă că puteți construi soluții care nu numai că ingerează date, ci și încurajează utilizatorii să furnizeze mai bune date.

Cum va permite 5G o creștere rapidă a aplicațiilor tehnologiei de viziune computerizată?

La viteze de conectare mai rapide, puteți muta mai multă procesare în cloud, ceea ce deschide posibilități pentru tot felul de aplicații noi de viziune computerizată. Cu toate acestea, depinde într-adevăr de aplicație și de cât de larg va fi adoptată.

5G ar putea avea un impact fragmentat și ar putea extinde divizia digitală, deoarece unele părți ale lumii au o conectivitate din ce în ce mai rapidă, în timp ce alte zone vor continua să aibă o conectivitate lentă. Aplicațiile care se concentrează pe oamenii cu acces la 5G vor beneficia, în mod evident. Dar aplicațiile mai larg adoptate ar trebui să aleagă între a-și petrece timpul și banii pentru ceea ce va deveni, în esență, două versiuni ale aceleiași aplicații sau a rămâne cu o singură versiune care este mai puțin robustă, dar care poate rula pe aproape orice conexiune.

Ce măsuri ia Fyusion pentru a profita de lansarea viitoare a tehnologiei 5G?

Vreau să precizez că Fyusion a petrecut mult timp asigurându-se că clienții pot accesa aplicațiile noastre chiar și pe vechile telefoane cu o disponibilitate slabă a benzilor. Cu Manheim singur, tehnologia noastră a imaginat peste un milion de mașini și nu am fi realizat acest lucru altfel.

Spunând aceasta, suntem foarte entuziasmați de ceea ce vedem în prezent – este un trifect de viteze de procesare în creștere, conectivitate 5G și nimic mai mult decât o revoluție în camerele de telefon. Puneți totul împreună și obțineți câteva dezvoltări noi pe care, din nefericire, nu le pot împărtăși cu dumneavoastră încă.

Există altceva pe care ați dori să-l împărtășiți despre Fyusion?

Este un moment foarte interesant pentru a lucra în domeniul viziunii computerizate – ca disciplină, ne mutăm în mainstream după mulți ani de a fi discutat ca o tehnologie viitoare. Fyusion crește rapid și angajăm oameni de știință în domeniul viziunii computerizate din toată lumea. Membrii noștri echipei pot lucra de oriunde, dar sunt întotdeauna bineveniți în birourile noastre din Potrero Hill.

Mulțumim pentru acest interviu minunat, cititorii care doresc să afle mai multe despre Fyusion ar trebui să viziteze Fyusion.