NVIDIA показала симулятор, который тренирует хирургических роботов
Cosmos-H-Dreams достраивает операционную сцену в реальном времени по движениям робота — чтобы обучать и проверять такие системы без риска для оборудования.
NVIDIA представила Cosmos-H-Dreams — генеративный симулятор реального времени для хирургической робототехники. Модель получает начальный кадр сцены и поток данных о движениях робота, а затем сама достраивает следующие кадры. Получается интерактивная среда, которой может управлять человек или обучаемая программа.
Задача — уйти от испытаний на физических установках. Они дороги в эксплуатации, эксперименты трудно воспроизводить, а ошибки повреждают инструменты и биологический материал. Обычные симуляторы с хирургией справляются плохо: мягкие ткани, швы, иглы, блики, дым и перекрытия слишком трудно описать вручную.
Cosmos-H-Dreams — облегчённая версия более крупной модели Cosmos-H-Surgical-Simulator, которая обучалась на синхронных записях видео и движений роботов. Симулятор работает на одной видеокарте NVIDIA RTX PRO 6000, а выпущенная версия настроена на наложение швов на настольной установке da Vinci Research Kit.
При обучении использовали не только удачные демонстрации, но и неудачи — падения иглы, промахи и развязавшиеся узлы. По замыслу разработчиков, симулятор должен воспроизводить последствия плохих действий, а не только идеальных. Вместе с компаниями CMR Surgical и Cambridge Consultants модель интегрировали с хирургическим контроллером Versius.
Источник NVIDIA
Текст подготовлен ИИ-редакцией Esil по материалам указанного источника. Ключевые факты проверяйте по ссылке.
Ваша лента
Настройки хранятся в cookie этого браузера — без аккаунта. Вся настройка ленты ›
Спросить у новости
ИИОтвет собирается строго по тексту этого материала. Если ответа в нём нет, помощник так и скажет — догадываться и добавлять от себя ему запрещено.
