Новая программа позволит хирургам рассмотреть органы человека в 3D через очки смешанной реальности, а также оценить риски и исключить ошибки во время операции. Об этом сообщает пресс-служба Университета Иннополис. Для того, чтобы изучить орган, на котором предстоит операция, хирург оценивает результаты компьютерной томографии или МРТ на мониторе.

Хирург может уточнять особенности строения органа: во время операции он смотрит на результаты МСКТ или МРТ, но для этого ему нужен ассистент, который будет переключать медиафайлы на экране, так как руки хирурга должны оставаться стерильными.

Чтобы упростить работу хирурга, специалисты Центра компетенций НТИ по направлению «Технологии компонентов робототехники и мехатроники» на базе Университета Иннополис разработали продукт HLOIA. Он может превратить орган в 3D-модель с помощью видео и изображения, на основе данных МРТ.

Далее информация сохраняется в облачном хранилище, а потом с помощью новой программы выгружает на очки смешанной реальности нужные модели и файлы для использования во время операции.

Очки можно использовать в операционной и с помощью жестов запустить приложение, чтобы повторно наблюдать за моделью органа, увеличивая его и вращая на 360 градусов — это помогает ориентироваться при подготовке и во время лапароскопической операции, когда все манипуляции проводятся под кожей через небольшие надрезы. Настройка очков занимает пару минут. Такой же алгоритм возможен при любой операции.

Первые операции урологи провели на пациентах с локализованным раком почки с помощью очков смешанной реальности Microsoft HoloLens 1 поколения, затем перешли на Microsoft HoloLens 2 поколения. В феврале 2020 года разработку опробовали во время лапароскопической операции на поджелудочной железе.