Model Dunia Bedah NVIDIA Sekarang Berjalan Langsung di Satu GPU

NVIDIA (NVDA ) telah merilis simulator bedah yang menghasilkan lapangan operasi secara waktu nyata, cukup cepat untuk seorang ahli bedah atau kebijakan robot terlatih untuk mengarahkan adegan saat itu sedang diproduksi. Model, Cosmos-H-Dreams, berjalan sekitar 160 frame per detik pada satu RTX PRO 6000 GPU, naik dari sekitar 10 frame per detik untuk model offline yang didistilasi, menurut angka NVIDIA sendiri. Berat dan kode layanan dimuat pada 23 Juli 2026, dan perusahaan menerbitkan pemecahan teknis empat hari kemudian.

Tidak ada mesin fisika di bawahnya. Sebagai gantinya, model tersebut mempelajari dinamika visual dari video bedah yang dipasangkan dan kinematika robot, kemudian memprediksi apa yang akan dilihat kamera selanjutnya. Ini mengambil satu frame awal plus aliran langsung perintah lengan dan menghasilkan blok 12 frame berikutnya sebelum mengonsumsi batch tindakan berikutnya. Klien browser dapat mengarahkannya dari keyboard, headset Meta Quest dapat memetakan gerakan pengontrol yang dilacak ke dalam tindakan robot, dan kebijakan bedah yang dipelajari dapat dimasukkan ke dalam loop yang sama sebagai pengganti manusia. Kelas model yang sama telah menghasilkan uang serius di tempat lain dalam industri, termasuk Odyssey’s $310 juta Seri B untuk model dunia.

Bagaimana Frame Rate Dibeli

Cosmos-H-Dreams adalah murid yang didistilasi dari model yang lebih lambat. Guru, Cosmos-H-Surgical-Simulator, dibangun pada model video 2-miliar-parameter NVIDIA Cosmos-Predict2.5 dan menghasilkan roll-out bedah dalam satu lulus setelah fakta, yang cocok untuk skor jalur yang direkam tetapi tidak mengarahkannya. Murid itu dilatih untuk terus berlanjut dari sejarah yang dihasilkannya sendiri daripada dari kebenaran tanah yang bersih, prosedur yang kartu model menyebutnya distilasi self-forcing, dan menghasilkan setiap frame laten dalam dua hingga empat langkah denoising bukan banyak langkah guru. FlashDreams, perpustakaan inferensi streaming NVIDIA, menangani sisanya dengan mempertahankan cache bergulir dari frame sebelumnya dan pra-mengambil pekerjaan GPU berulang sehingga perangkat keras tidak merencanakan kembali pada setiap langkah.

Titik yang dirilis melakukan satu pekerjaan: menjahit meja pada da Vinci Research Kit, platform fisik yang digunakan laboratorium akademis untuk mengembangkan dan menguji kebijakan bedah. Ini berjalan pada 288 oleh 512 piksel dan menerima perintah pada 10 Hz efektif. Ini adalah tugas bangku, bukan tubuh.

Campuran pelatihan adalah yang paling menarik daripada frame rate. Bersama dengan demonstrasi menjahit dan mengikat simpul yang sukses dari Johns Hopkins, NVIDIA sengaja mempertahankan kegagalan dan episode out-of-distribution: jatuh jarum, melewatkan lemparan, simpul yang tidak bertahan. Alasannya adalah simulator yang dimaksudkan untuk skor kebijakan harus mereproduksi konsekuensi dari tindakan yang buruk, bukan hanya demonstrasi ideal.

Versius Mendapatkan Koneksi

NVIDIA mengatakan bahwa mereka bekerja sama dengan CMR Surgical dan Cambridge Consultants, perusahaan teknik yang dimiliki Capgemini, untuk menghubungkan model ke pengontrol ahli bedah untuk platform Versius CMR dan menjalankannya secara langsung. CMR mendemonstrasikan setup kepada audiens bedah di konferensi bedah robot di Florida pada akhir Juli 2026. Perusahaan memiliki alasan untuk berada di loop awal: NVIDIA mengkreditkannya dengan menyumbangkan hampir 500 jam data prosedur Versius yang anonim ke dataset Open-H Embodiment yang dimana model keluarga itu dilatih sebelumnya, dan CMR menggambarkan dirinya sebagai kontributor terbesar untuk dataset tersebut.

CMR juga langsung tentang apa yang tidak dimaksud dengan demonstrasi. Catatan kaki pada rilisnya menyatakan bahwa simulasi “hanya untuk tujuan penelitian dan demonstrasi”, bukan bagian dari sistem Versius Plus yang disetujui, dan tidak dimaksudkan untuk pengambilan keputusan klinis atau perawatan pasien. Versius Plus sendiri disetujui di AS hanya untuk penghapusan kandung empedu pada orang dewasa, dengan aplikasi ginekologi yang sedang menunggu. Persetujuan regulasi untuk perangkat bedah masih bergerak prosedur per prosedur, seperti Momentis’s Anovo robot menunjukkan ketika itu memenangkan persetujuan AS untuk bedah multiport. NVIDIA menggambar garis yang sama dalam postingannya sendiri: ini adalah platform penelitian dan pengembangan, bukan sistem diagnostik dan bukan pengontrol untuk robot bedah fisik.

Agenda Validasi

Model ini adalah setengah generatif dari Medical Physics Simulation framework NVIDIA yang open-source pada 22 Juli 2026 dalam tumpukan Isaac untuk Healthcare, di mana solver konvensional menangani kontak dan gesekan dan model yang dipelajari menangani dinamika adegan visual. Ini adalah posisi yang sama yang diambil NVIDIA di lantai pabrik, mensuplai lapisan simulasi yang lain vendor membangun produk di atasnya.

Pos NVIDIA mengatakan bahwa langkah berikutnya adalah untuk mengevaluasi lebih dari kualitas visual, dan mengusulkan keluarga tes loop tertutup sebagai ukuran apakah versi cepat cukup akurat untuk dipercaya:

• akurasi posisi dan pose alat
• kesetiaan siklus penggenggam dan stabilitas ketika instrumen sedang tidak aktif
• drift selama roll-out panjang
• kesepakatan antara hasil kebijakan simulasi dan nyata

Bukti transfer terdekat sejauh ini berasal dari garis keturunan sebelumnya: sebuah makalah 2025 oleh peneliti NVIDIA dan Johns Hopkins melaporkan korelasi kuat antara roll-out dalam model bedah offline dan hasil kebijakan pada sistem penelitian da Vinci fisik untuk tugas suture-pad, plus keselarasan awal pada pekerjaan gallbladder ex-vivo. Itu adalah model bidireksional yang lambat bukan murid dua langkah, dan repositori itu sendiri mencatat bahwa jadwal yang lebih cepat mengorbankan beberapa kesetiaan.

Mendapatkannya dengan tangan adalah murah oleh standar model frontier. Beratnya membawa lisensi model terbuka NVIDIA dan kode layanan adalah Apache 2.0, dengan repositori yang meminta GPU dengan 12 GB memori, driver saat ini, dan Linux. Tidak ada laporan teknis yet; tautan repositori ke satu menunjuk ke file placeholder. Kebijakan robot yang dikondisikan video sudah bergerak ke garis produksi, seperti mimic robotics’ FLUX-mimic di pabrik Audi, tetapi bedah memiliki tes penerimaan yang lebih sulit. Untuk laboratorium yang melatih kebijakan bedah, pertanyaan yang penting adalah apakah skor yang diperoleh di dalam simulator ini memprediksi apa yang dilakukan lengan pada suture-pad nyata. NVIDIA telah menamai benchmark ini, dan hasilnya adalah apa yang putaran berikutnya bukti akan bergantung.