スティーブン・ミラー、Fyusionの共同創設者兼エンジニアリング担当上級副社長 – インタビュー・シリーズ

スティーブン・ミラーは、3Dイメージングとコンピュータビジョンの会社であるFyusionの共同創設者兼エンジニアリング担当上級副社長です。Fyusionは、Cox Automotiveグループの一部です。Fyusionを創設する前は、スタンフォード大学でコンピュータサイエンスを学び、UCバークレーで学部生の時にパーソナルロボティクス、たとえば洗濯物の折りたたみや手術用の結び方について研究していました。彼は、Google (GOOGL ) Hertzフェロー、SAPスタンフォード大学院フェロー、NSFフェローです。

Fyusionについて説明してください。3Dデータの簡単なキャプチャと視覚化をどのように実現していますか?

Fyusionは、AI駆動の3D顧客体験を提供するコンピュータビジョンの会社です。私たちは、ほとんどのAndroidとiOSデバイスで動作するシンプルなスマートフォンアプリを使用して、3D画像をキャプチャできます。アプリにはステップバイステップのガイダンスが含まれており、技術的なスキルに関係なく誰でも使用できます。画像をキャプチャするには1～2分かかります。その後、私たちのAIエンジンであるALISは、3D画像を分析して視覚的なデータを活用可能な情報に変換します。現在、車の外部の損傷を診断するために3D画像を使用することに焦点を当てています。

.fyuse形式を使用して、スマートフォンの単一カメラで3D画像を作成するアルゴリズムについて説明してください。

写真、動画と.fyuse形式を比較することが役立ちます。写真は特定の時点の静的なイメージを1つの角度から捉え、動画は一定の時間枠内で連続したイメージを捉えます。一方、.fyuseイメージは私たちが「空間内の瞬間」と呼ぶものを捉えます。視聴者は単一の角度や線形の時間軸に制限されません。物体の1つの側面だけを見るのではなく、周囲も見ることができます。

.fyuseイメージを作成するには、カメラを使用して被写体の周りを一方向に回します。あるいは、Fyusionテクノロジーは固定のイメージングソリューションやドローンなどの非伝統的なイメージングソリューションとも互換性があります。

私たちの.fyuseファイル形式がこれらのイメージを活性化します。軽量で複雑な多面的なインタラクティブ性を可能にします。また、一般的なラップトップ、タブレット、スマートフォンとも完全に互換性があります。

Fyusionでキャプチャおよび分析されるデータについて説明してください。

車両の場合、ALISは車両のすべての部分を認識し、損傷の位置、サイズ、重大性を判断し、潜在的な誤った陽性（たとえば、道路から飛び散った泥など）を排除できます。私たちが開発し特許を取得したテクノロジーは、他の問題も解決できますが、現在はこの問題に焦点を当てています。

AIベースのLightfield Information Suite (ALIS)について説明してください。

ALISは、Fyusion製品の背後にあるエンジンです。軽量の3Dイメージングと深い視覚的理解を可能にします。ALISは3つの部分で構成されています。キャプチャ、エンジン、ビューアー。キャプチャモジュールでは、モバイルアプリケーションにはビルトインのチュートリアルとカスタマイズ可能なワークフローが含まれており、スマートフォンの大部分で高品質の3D画像をキャプチャできます。Fyusionのイメージキャプチャは、DSLR、ドローン、他のデバイスもサポートしています。

2番目のステップであるエンジンでは、ALISはこれらの3D画像を分析して活用可能な情報、たとえば顧客が必要とする損傷の種類に変換します。また、2D画像を生成して損傷の証拠を提供することもできます。

最後に、ビューアーは.fyuseファイル形式を表示します。.fyuseは特許取得済みで軽量であり、高速なロード時間で没入感のある3D体験を提供します。.fyuseにオーディオ、ビデオ、2D画像などのさまざまな体験を追加できます。

FyusionはARとVRに対応しています。将来的にこれらのアプリケーションがどのくらい大きくなるかについてどう考えていますか?

拡張現実は10億ドル規模の産業であり、より主流になりつつあります。強力な新しいモバイルデバイスや低遅延のネットワークにより、3Dで周囲をキャプチャすることが容易になりました。顧客のオンライン体験の期待は、コンテンツクリエイターが追いつくだけの速さで高まります。

特に自動車業界では、車の購入がオンラインで行われることが増えています。数年以内に、AR、VR、3Dリストの需要が急増することを予想しています。目標は、シンプルな車両詳細ページ（VDP）を車両体験ページ（VEP）に変えることです。これにより、大規模な自動車ディーラーと小規模な自動車ディーラーが共に繁栄できるようになります。これには、リストに3Dロゴやリッチメディアタグを追加したり、ショッパーが車のトランクにゴルフクラブを仮想的に置いて、どのように収まるかを見せることが含まれます。

これらのアプリケーションが主流に広がるのを待つことはできません。

3D画像を使用することで、電子商取引でクリック率と収益がどれほど改善されるかについて説明してください。

私は卸売と小売の自動車販売に最も詳しくいます。3Dイメージングはオンラインショッパーにとって新しいレベルの信頼を生み出しました。これは、高価なアイテムである車のような大きな買い物では特に重要です。

私たちの内部データによると、3D画像はユーザーの関与と車両詳細ページでの滞在時間を増加させ、車の販売を増加させることが示されています。車両のリアルな3D体験を提供することで、ベンダーに対する信頼を高め、肯定的な感情を醸成することができます。

Fyusionの1つの選択肢は、データをローカルで処理するかクラウドで処理することです。各々の利点について説明してください。

ローカルでは、エッジAIは開発者に大きな制約を課します。特にモバイルフォンの使用の場合、通常のAI開発者にとっての懸念（ネットワークの最適化、結果の信頼性など）に加えて、実用的懸念もあります。メモリの圧力、バッテリーの消耗、ユーザーまたはオペレーティングシステムによってプロセスがバックグラウンド化される可能性などです。また、エッジでは、比較可能なCPUとGPUが利用できることはまれです。フラグシップデバイスの場合でも、まれにしかありません。

あらゆる可能性のあるコーナーケースを計画する必要があります。一方、クラウドでは、どのソリューションも監視および微調整できます。

しかし、エッジAIは完璧な「オートスケーリング」ソリューションと見なすことができます。新しいユーザーごとに、完全に新しいマシンが利用可能になります。エッジでネットワークを最適化して実行した場合、2つまたは200万のクライアントを同じようにサービスできます。

最も強力なハードウェアは常にクラウドに存在しますが、データは王です。データが多く、生の状態で、より良くなります。エッジのAIは、生の入力データにアクセスでき、制限がありません。一方、クラウドのAIソリューションの場合、入力データは処理（圧縮、部分）されるか、巨大で、帯域幅が深刻な懸念事項になります。

エッジAIはユーザーに最も近いため、クラウドAIでは利用できない多くの可能性が開けられます。リアルタイムで最適化された場合、リアルタイムでフィードバックを提供できます。つまり、データをインジストするだけでなく、ユーザーがより良いデータを提供することを促すソリューションを構築できます。

5Gはコンピュータビジョンテクノロジーのアプリケーションの急速な成長をどのように促進しますか?

高速な接続速度では、クラウドでの処理を増やすことができ、さまざまな新しいコンピュータビジョンのアプリケーションの可能性が開けられます。ただし、アプリケーションによっては、広く採用されるかどうかによって異なります。

5Gは断片化された影響を与え、デジタル格差を拡大させる可能性があります。世界の一部地域では接続性が速くなり、他の地域では遅いままです。5Gにアクセスできる人々を対象としたアプリケーションは明らかに利益を得ます。しかし、より広く採用されるアプリケーションは、ほぼすべての接続で動作するように1つのバージョンを維持するか、2つのバージョンを作成して維持する時間とお金を費やす必要があります。

Fyusionは5Gの将来の展開を活用するためにどのようなステップを講じていますか?

まず、Fyusionは古い携帯電話や帯域幅の可用性が低い環境でもアプリケーションにアクセスできるように、多大な時間を費やしてきました。マンハイムだけでも、100万台以上の車両を画像化しています。そうでなければ、これを達成できなかっただけです。

しかし、私たちは現在見ているものに非常に興奮しています。処理速度の向上、5G接続、カメラフォンの革命と呼ばれるものがすべて組み合わさるからです。すべてをまとめると、新しい開発が生まれますが、まだ話すことはできません。

Fyusionについてさらに共有したいことがありますか?

コンピュータビジョンを扱うことは、長年にわたって将来のテクノロジーとして話し合われてきた分野ですが、現在主流になりつつあります。Fyusionは急成長を遂げており、世界中からコンピュータビジョンの科学者を募集しています。チームメンバーはどこからでも働くことができ、ポトルエロヒルのオフィスにもいつでも歓迎されます。

素晴らしいインタビュー、詳しく知りたい読者はFyusionを訪問してください。