NVIDIA Cosmos3-H-Dreams: Üretken Simülasyon İle Klinik Cerrahiye Hayat Vermek

Cadiere tutucuyu hareket ettirdiğinizi, safra kesesini kavradığınızı ve gerçek zamanlı tepki veren üretken bir cerrahi sahnede onu kaldırdığınızı hayal edin. NVIDIA Cosmos3-H-Dreams, şimdiye kadarki en ikna edici vücut içi görüntülerle etkileşimli üretken simülasyonu klinik cerrahinin görsel ve prosedürel karmaşıklığına taşıyor.

Cosmos-Predict2.5 üzerine inşa edilen ilk Cosmos-H-Dreams sürümü, cerrahi robotik için temel bir test alanı olan dVRK masaüstü dikiş (suturing) görevlerine etkileşimli üretken simülasyon getirmişti. Bir Dünya Temel Modeli (World Foundation Model - WFM) olarak bu sistem, sahne geometrisini, doku deformasyonunu ve fiziksel etkileşimleri açıkça sayısal olarak modellemek yerine, görsel dinamikleri doğrudan senkronize video ve robot kinematiğinden öğrendi.

Bugün Cosmos3-H-Dreams, CMR Surgical Versius platformundaki klinik prosedürler sırasında kaydedilen video ve robot kinematiği verilerinden öğrenerek bu yeteneği bir üst seviyeye taşıyor. Klinik kolesistektomi (safra kesesi ameliyatı) kayıtlarıyla eğitilen ve canlı kinematik kontrolü destekleyen ilk gerçek zamanlı üretken cerrahi simülatör olan bu model, Cosmos 3 tarafından güçlendirilmekte ve NVIDIA’nın hızlandırılmış akış-çıkarım (streaming-inference) kütüphanesi FlashDreams ile tek bir NVIDIA RTX PRO 6000 GPU üzerinde etkileşimli olarak çalışmaktadır.

1. Masaüstü Görevlerden Klinik Sahnelere#

Masaüstü gibi kontrollü bir ortamda aletler nispeten basit bir arka plan önünde çalışır. Ancak insan vücudunun içinde küçük alet hareketleri tüm sahneyi etkiler: çekme kuvveti altında dokular gerilir, yansımalar kayar, anatomik yapılar kapanır (oklüzyon) ve duman görüşü değiştirir.

Üretken bir simülatörün başarılı olması ve yazılım geliştirme süreçlerinde güvenilir bir test ortamı sunması için şu kritik gereksinimleri karşılaması gerekir:

• Zamansal Tutarlılık (Temporal Consistency): Başlangıç görüntüsü ve verilen araç eylemleri doğrultusunda yeni video blokları üretilirken anatomi ve alet geometrisi korunmalıdır; aksi takdirde küçük hatalar zamanla birikerek yapıyı bozar.
• Biyomekanik Doğruluk ve Kontrol Uyumu: Görsel gerçekçilik doğrulama için yalnızca bir başlangıç noktasıdır. Öteleme, döndürme ve tutucu komutları tutarlı anatomik sonuçlar üretmelidir; komutları yok sayan olası görünümlü bir çıktı etkileşimli bir ortam olarak kullanılamaz.
• Düşük Gecikmeli Üretim (Low Latency): Canlı bir kontrol döngüsünde bu doğruluğu ve yanıt verebilirliği sürdürmek, gerçek zamanlı damıtılmış (distilled) modelleri ve düşük gecikmeli çıkarım mimarilerini zorunlu kılar.

Cosmos3-H-Dreams, klinik kolesistektomi için özelleştirilmiş ve gerçek zamanlı üretim için damıtılmış modeliyle eylem-koşullu etkileşimi karmaşık anatomi ve doku hareketlerine sahip sahnelere taşır.

2. Cosmos3-H-Dreams'te Yeni Olan Nedir?#

2.1 Cosmos 3 Temeli ve Daha Zengin Cerrahi Kontroller#

Cosmos3-H-Dreams, Open-H-Embodiment veri kümesi üzerinde önceden eğitilmiş 16 milyar parametreli bir model olan Cosmos3-H-Embodied-Nano üzerine inşa edilmiştir ve özel olarak derlenmiş kolesistektomi verileri üzerinde çift yönlü bir öğretmen modeli (bidirectional teacher) uzmanlaştırır.

Mühendislik ve Öğrenme Çıkarımları:

• Veri Odaklı Simülasyon: Karmaşık fizik kurallarını sıfırdan kodlamak yerine senkronize sensör/kinematik verisi ve video akışlarından dünya modelleri eğitmek, simülasyon geliştirmede paradigma değişimi yaratmaktadır.
• Model Damıtma ve Akış Çıkarımı: 16 milyar parametreli büyük bir temel modeli canlı kontrol döngülerinde tek bir GPU üzerinde çalıştırmak için FlashDreams gibi akış (streaming) optimizasyonları ve öğretmen-öğrenci model damıtma teknikleri üretim ortamları için kritik öneme sahiptir.