NVIDIA Cosmos-H-Dreams: Cerrahi Robotlar için Gerçek Zamanlı Simülasyon
NVIDIA'nın Cosmos-H-Dreams'i, cerrahi robotik için gerçek zamanlı, aksiyona duyarlı üretken simülasyon sunuyor; RTX PRO 6000'de 160 FPS hızında çalışıyor.
NVIDIA, cerrahi robotik için gerçek zamanlı, aksiyona duyarlı üretken bir dünya modeli olan Cosmos-H-Dreams'i tanıttı. Sistem, Cosmos-H-Surgical-Simulator'ın öğrendiği görsel dinamikleri, self-forcing distillation adı verilen bir teknikle nedensel (causal) ve az adımlı bir öğrenci modele damıtıyor; bu model FlashDreams çıkarım kütüphanesi üzerinden tek bir NVIDIA RTX PRO 6000 GPU'da saniyede yaklaşık 160 kare üretebiliyor.
Bu yaklaşım, doku deformasyonu, aletler arası ince etkileşimler, parlak yüzeyler ve tıkanmalar gibi cerrahi sahnelerin manuel olarak modellenmesi zorluğunu aşarak, robot kinematiği ve video verisinden doğrudan öğrenmeyi mümkün kılıyor. Öğretmen model, dVRK masaüstü sütur verisi üzerinde başarısız denemeler dahil ince ayar yapılarak, öğrenci modelin sadece ideal değil, kötü aksiyonların sonuçlarını da doğru şekilde simüle etmesi sağlanıyor.
Cosmos-H-Dreams; klavye tabanlı tarayıcı istemcileri, Meta Quest üzerinden WebXR entegrasyonu ve öğrenilmiş cerrahi politikalarla kapalı döngü bağlantısı gibi çoklu insan-makine arayüzlerini destekliyor. CMR Surgical ve Cambridge Consultants ile yapılan iş birliğiyle Versius platformunda da gerçek zamanlı çalışabildiği gösterildi. NVIDIA, kendi veri setleriyle model eğitmek isteyenler için öğretmen ince ayarı ve self-forcing distillation adımlarını içeren bir rehber de sunuyor.
Bu sentez, kaynağından yapay zeka tarafından üretildi; insan editör ya da elle onay adımı yoktur. Nasıl çalışıyoruz