Нейроспутник: Левша (LevshAI)
Роботизированный комплекс для эндоваскулярной нейрохирургии

Продукт
Название базовой системы (платформы): Искусственный интеллект (ИИ, Artificial intelligence, AI)
Разработчики: Нейроспутник (Neurosputnik)
Дата последнего релиза: 2023/06/26
Отрасли: Фармацевтика, медицина, здравоохранение
Технологии: Робототехника,  Роботы Сервисные,  Серверные платформы,  Телемедицинский сервис

Содержание

Основные статьи:

2023

Разработка технологии передачи тактильных ощущений для роботов-хирургов

Отечественную интеллектуальную роботизированную систему копирования движений LevshAI («Левша») для дистанционных нейрохирургических эндоваскулярных операций представили ученые из компании «Нейроспутник». Она обладает тактильной обратной связью и возможностью предоперационного персонализированного 3D-моделирования. Доклиническое экспертное тестирование проведено ассоциацией эндоваскулярных нейрохирургов имени академика Ф. А. Сербиненко. Об этом 26 июня 2023 года Zdrav.Expert сообщил Университет науки и технологий МИСИС.

Ученые в России создали технологию передачи тактильных ощущений для роботов-хирургов
«
LevshAI («Левша») использует искусственный интеллект до и во время операции, моделирует сосуды пациента в 3D-формате, корректирует дрожь пальцев, выявляет критические ситуации. Большинство роботизированных устройств не используют изоморфную тактильную обратную связь и не адаптируют устройство для удобства хирургов. Например, эндоваскулярная роботизированная система GRX (Corindus) для операций на сердце использует джойстики без тактильной обратной связи, которые требуют от хирургов переучивания. Поэтому разрабатываемая нами система особенная, более удобна для медиков и безопасна для пациентов,
сообщила Александра Бернадотт, к.м.н., доцент кафедры инженерной кибернетики НИТУ МИСИС, генеральный директор компании «Нейроспутник».
»

Необходимость внедрения роботизации и мехатроники для реализации эндоваскулярной телехирургии назрела по ряду причин. Во-первых, она обеспечивает доступ к операции из любой точки мира. Поскольку количество опытных нейрохирургов ограничено, возникает необходимость проводить операции дистанционно. Во-вторых, позволяет защитить врача от воздействия рентгеновских лучей, так как при выполнении эндоваскулярных операций хирурги стоят близко к источнику излучения, который используется для визуального контроля хода операции. Кроме того, экосистема «Левша» позволяет отработать навыки на тренажере как в режиме обучения, так и в режиме персонализированной симуляции.Игорь Лейпи, ГК Softline: Объем поставок российских операционных систем в ближайшие годы увеличится как минимум вдвое 2.2 т

Благодаря архитектуре системы копирования движений можно интегрировать ассистивные интеллектуальные модули в операционный процесс, что позволит снизить вероятность критических операционных осложнений.

Экосистема «Левша» предоставляет возможность 3D-реконструкции сосудов головного мозга и позволяет учитывать особенности конкретных пациентов, планировать операцию, изменять тактику во время хирургического вмешательства, минимизируя риск осложнений.

Особенность эндоваскулярной хирургии – минимальная инвазивность. Во время такого вмешательства микрокатетер перемещается по внутренним стенкам сосудов. Контролирующий блок системы «Левша» находится за пределами операционной, защищая медиков от радиации. Врач дистанционно с помощью специальных контроллеров приводит оперирующее устройство в движение. Оцифрованный сигнал с рук хирурга предоставляет интеллектуальному блоку зашифрованную информацию в виде команд для перемещения катетера и других инструментов.

Оперирующий блок копирует движения хирурга и перемещает катетеры и другие хирургические инструменты по сосудам головного мозга. Контролировать их движение помогает рентгенофлуороскоп и оптические датчики. Встроенный ИИ обрабатывает информацию и передает ее на визуальный блок управления «Левши».

Контролирующий и оперирующий блоки взаимодействуют друг с другом через Ethernet-соединение. Связь может быть как проводной, так и беспроводной. Модуль визуализации показывает рентгеновское изображение сосудов головного мозга пациента в режиме онлайн, позволяя хирургу контролировать перемещение. Для обнаружения скручивания и вибрации, используются пьезодатчики, расположенные вдоль катетера. Данные из операционной подвергаются дополнительной обработке искусственным интеллектом (фильтрация шума, линеаризация сопротивления, удаление артефактов), чтобы обратная связь на стороне хирурга была максимально точной.

«Левша» максимально точно имитирует тактильную обратную связь, чтобы обеспечить кинестетическое ощущение, когда в сосуде головного мозга возникает механическое сопротивление или катетер упирается в стенку. Более того, хирург получает информацию о силе и направлении механического сопротивления визуально – в виде диодной шкалы.

Особое значение в экосистеме LevshAI имеет тренажер. Система оснащена обучающей программой, которая позволяет хирургам практиковаться на 3D-симуляторе и выбирать наилучшую тактику.

«
Сначала с помощью изображений компьютерной или магнитно-резонансной томографии (МРТ) пациента перед операцией воссоздается трехмерная архитектура сосудистой системы головного мозга. На этой базе создается 3D-реконструкция, которая интегрируется в симулятор, также разработанный нашей командой. Это сложная математическая и алгоритмическая задача, требующая обучения искусственного интеллекта на обширном наборе данных,
рассказала Александра Бернадотт.
»

В ближайшем будущем начнется этап клинических исследований в сотрудничестве с ассоциацией эндоваскулярных нейрохирургов имени академика Ф. А. Сербиненко. В перспективе, для ускорения восприятия информации устройством в критических ситуациях, разработчики внедрят интерфейс «мозг-компьютер», который в 300 раз быстрее распознает мысленные команды, чем движения.

Метод защиты робота-хирурга от кибератак

Команда российских ученых предложила подход к обеспечению кибербезопасности интеллектуальных телеоперационных хирургических систем с учетом современных требований. Как Zdrav.Expert 3 апреля 2023 года сообщили представители компании «Нейроспутник», подход уже был применен для обеспечения безопасности разработки компании – отечественного интеллектуального роботизированного комплекса для эндоваскулярной нейрохирургии «Левша» (LevshAI).

Российские ученые предложили метод защиты роботов-хирургов от кибератак
Демонстрация работы комплекса LevshAI

По их словам, предложенная модель кибербезопасности позволяет обеспечить должную работу комплекса во время различных атак на устройство. Она сочетает интеллектуальные автономные контроллеры для вычисления аномальных и подозрительных действий, а также анализирует сетевой трафик на предмет наличия признаков кибератак.

По состоянию на апрель 2023 года «Левша» – это единственная в мире специальная экосистема, обеспечивающая персонализированный и безопасный подход к пациентам, передовое для начинающих хирургов обучение нейрохирургии и возможность дистанционной операции сосудистых патологий мозга, уточнили в «Нейроспутнике».

Как пояснила глава компании «Нейроспутник», доцент кафедры инженерной кибернетики НИТУ МИСИС, к.м.н. Александра Бернадотт, интеллектуальные роботизированные системы в хирургии – новая область, которая еще не имеет устоявшихся решений. Подходы к обеспечению безопасности интеллектуальной телеоперационной хирургической системы почти не освещены в литературе. При этом, по её словам, существуют сугубо специфические проблемы, которые связаны с необходимостью обеспечить безопасность пациентов и хирургов при использовании таких систем при обрыве связи, отказе работы оборудования, кибератаках.

Александра Бернадотт, глава компании «Нейроспутник», доцент кафедры инженерной кибернетики НИТУ МИСИС
«
«Безопасность сети необходимо учитывать в дополнении к криптографической безопасности транспортного протокола. Существует необходимость изолированного контура для обеспечения двойного контроля во время операции», – добавила Александра Бернадотт.
»

Безопасность телехирургической системы «Левша» концептуально обеспечивается двумя основными частями, блоком управления и исполнительным блоком, которые соединены с помощью VPN, но могут находится далеко друг от друга. Одна часть системы кибербезопасности – менеджер сессий, подключен к VPN, предоставляя услуги безопасности для сетевого подключения основных блоков. Кроме того, IP- и MAC-адреса взаимодействующих устройств заранее фиксируются в распределенном реестре. Для защиты сервера аутентификации от неконтролируемого генерирования большого количества ложных сеансов и последующего отказа в обслуживании созданы правила фильтрации, рассказали в «Нейроспутнике».

«
«Правильная стратегия заключается в предотвращении кибератак на всех этапах. Как при подготовке к операции, во время неё, так и впоследствии для сохранения здоровья пациента, – подчеркнула исследовательница. – Мы предложили надежные методы для расширения протоколов безопасности с использованием интеллектуальных агентов и резервных автономных схем. Эта модель безопасности позволяет хирургу управлять процессом операции во время различных атак. Коммуникационный блок отделяется от операционного и отключается до устранения угрозы. При необходимости хирург, имеющий физический доступ к автономной части, мог бы управлять исполнительным блоком из локальной палаты. Этот подход к обеспечению безопасности реализован в системе "Левша"».
»

По оценкам некоторых экспертов, роботизированная хирургия дешевле классических методов. Она также избавляет врачей от радиоактивного облучения, так как операции на сосудах мозга и сердца проводятся в режиме рентгеновского мониторинга. Кроме того, система активно использует искусственный интеллект, который информирует о критических состояниях, подсказывает оптимальное решение и расширяет возможности для совместных сложных операций, одновременно повышая уровень безопасности пациента.

Несмотря на острую необходимость развития симуляторов, телехирургии и персонализированной хирургии существует ряд строгих требований к архитектуре и компонентам подобного оборудования. Основным сдерживающим фактором для выхода такой системы на рынок являются гарантии надежности и безопасности для пациентов. Телехирургические роботизированные комплексы сложны для внедрения и защиты, так как любая неполадка или кибератака может причинить существенный вред здоровью, рассказали в «Нейроспутнике».

Интеллектуальный роботизированный комплекс LevshAI

Экосистема «Левша» активно использует искусственный интеллект под разные задачи и состоит из трёх продуктов, работающих независимо друг от друга: тренажер со специальным устройством ввода с тактильной обратной связью и симулятором сосудов мозга (дает возможность хирургам и студентам-медикам отрабатывать навыки), оперирующее устройство и серверное приложение с искусственным интеллектом для симуляции сосудов мозга конкретного пациента.

В свою очередь, каждый продукт системы оснащён разнообразными моделями глубокого обучения и алгоритмами математического моделирования. Так, проект «Левша» создает индивидуальный 3D-макет сосудов мозга пациента, позволяя до операции потренироваться и выбрать оптимальную стратегию, что может снизить риски осложнений с 30% до 0. Тренажер Левша воссоздает условия, почти идентичные условиям в операционной, имеет тактильную обратную связь, позволяющую хирургам в привычной манере взаимодействовать с областью патологии. Ассистирующий искусственный интеллект автоматически корректирует работу хирургов, помогает оценить особенности анатомии пациентов, дает рекомендации предоперационного и послеоперационного ведения больных с персонализированным подбором рекомендаций на основе данных пациента. «Левша» также имеет собственную обширную базу данных, которая позволяет запускать 3D-симуляции, выявлять индивидуальные особенности пациентов, распознавать критические состояния, ошибки хирургов и др. Оперирующий блок по состоянию на начало апреля 2023 года еще находится в разработке, а тренажер и персонализированный симулятор – уже на стадии подготовки пилота.

Процесс разработки системы «Левша» проходит при консультации Российского общества эндоваскулярных нейрохирургов (RENS) в ФМБА России. Участие практикующих хирургов позволяет адаптировать аппарат к работе в условиях реальной операции.



СМ. ТАКЖЕ (1)


Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Softline (Софтлайн) (89)
  X-Com (Икс ком) (54)
  Крок (35)
  Инфосистемы Джет (34)
  Астерос (34)
  Другие (1077)

  X-Com (Икс ком) (10)
  Softline (Софтлайн) (6)
  Крикунов и Партнеры Бизнес Системы (КПБС, KPBS, Krikunov & Partners Business Systems) (5)
  Крок (4)
  Delta Computers (Дельта Компьютерс) (3)
  Другие (53)

  Крикунов и Партнеры Бизнес Системы (КПБС, KPBS, Krikunov & Partners Business Systems) (3)
  Мобильные ТелеСистемы (МТС) (3)
  Почта России (2)
  Селектел (Selectel) (2)
  Концерн Автоматика (1)
  Другие (24)

  X-Com (Икс ком) (8)
  Национальные Технологии (2)
  Аладдин Р.Д. (Aladdin R.D.) (2)
  Ростелеком (1)
  ЗащитаИнфоТранс ФГУП (1)
  Другие (29)

  AirBit (АирБит) (1)
  Lenovo (1)
  TrueConf (Труконф) (1)
  ИТЛ (Информационно-Техническая Лаборатория) (1)
  КНС Групп (Yadro) (1)
  Другие (2)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  IBM (47, 79)
  Microsoft (12, 58)
  Oracle (28, 56)
  Dell EMC (21, 24)
  Lenovo (3, 23)
  Другие (374, 271)

  Lenovo Data Center Group (1, 6)
  Lenovo (1, 6)
  SOTI (1, 3)
  КНС Групп (Yadro) (1, 3)
  IBM (2, 2)
  Другие (18, 20)

  Селектел (Selectel) (1, 2)
  Гагар.ИН (1, 1)
  Delta Computers (Дельта Компьютерс) (1, 1)
  Hewlett Packard Enterprise (HPE) (1, 1)
  Lenovo Data Center Group (1, 1)
  Другие (7, 7)

  Аладдин Р.Д. (Aladdin R.D.) (1, 2)
  Delta Computers (Дельта Компьютерс) (1, 1)
  DEPO Computers (Депо Электроникс) (1, 1)
  Lenovo (1, 1)
  Red Hat (1, 1)
  Другие (7, 7)

  AirBit (АирБит) (1, 1)
  КНС Групп (Yadro) (1, 1)
  TrueConf (Труконф) (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Microsoft Active Directory - 32
  Oracle Exadata Database Machine - 21
  Oracle WebLogic Server - 20
  Microsoft System Center Operations Manager (SCOM) - 18
  Lenovo ThinkSystem - 17
  Другие 357

  Lenovo ThinkSystem - 6
  Soti Mobicontrol - 3
  Yadro Сервер - 3
  Dell EMC PowerEdge - 2
  Ngenix Облачная платформа - 2
  Другие 15

  Selectel Выделенные серверы - 2
  Lenovo ThinkSystem - 1
  Gagarin Серверы - 1
  Aerodisk Machine Серверы - 1
  Softline HaaS: оборудование как сервис - 1
  Другие 5

  JaCarta Authentication Server (JAS) - 2
  SharxBase - 1
  Delta Solutions: Tioga Pass Серверы с архитектурой Open Compute Project (OCP) - 1
  Yadro Сервер - 1
  WildFly - 1
  Другие 4

  AirBit LoRaWAN Network Server - 1
  Yadro Сервер - 1
  Trueconf MCU (Multipoint Control Unit) - 1
  Другие 0

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot (Промобот) (31)
  Cognitive Pilot (Когнитив Роботикс) (14)
  Nvidia (Нвидиа) (11)
  Яндекс (Yandex) (11)
  Cognitive Technologies (Когнитивные технологии) (10)
  Другие (461)

  ABB Group (7)
  Promobot (Промобот) (4)
  Ростелеком (3)
  АББ Россия (ABB) (3)
  NLogic (2)
  Другие (59)

  Mains Lab (Мэйнс Лаборатория) (2)
  Яндекс (Yandex) (2)
  Московский центр инновационных технологий в здравоохранении (2)
  Общегородской контакт-центр ДИТ Москвы (1)
  РИР (Росатом Инфраструктурные решения) (1)
  Другие (46)

  Департамент информационных технологий Москвы (ДИТ) (3)
  Яндекс (Yandex) (2)
  Инфосистемы Джет (2)
  Fora Robotics (Фора Роботикс) (2)
  Яндекс.Облако (Yandex.Cloud) (2)
  Другие (46)

  Университет Иннополис (2)
  Axenix (ранее Аксенчер Россия) Аксеникс (1)
  Metrarobotics (Метрароботикс) (1)
  VizorLabs (Визорлабс) (1)
  БизнесАвтоматика НПЦ (1)
  Другие (15)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot (Промобот) (9, 32)
  ABB Group (8, 23)
  Cognitive Pilot (Когнитив Роботикс) (2, 21)
  Cognitive Technologies (Когнитивные технологии) (1, 21)
  Nvidia (Нвидиа) (3, 10)
  Другие (521, 133)

  ABB Group (2, 11)
  Promobot (Промобот) (2, 4)
  Cognitive Technologies (Когнитивные технологии) (1, 2)
  Cognitive Pilot (Когнитив Роботикс) (1, 2)
  Gaskar Group (Гаскар Интеграция) (1, 2)
  Другие (10, 11)

  Эфко ГК (2, 1)
  Транспорт будущего (2, 1)
  Бирюч-НТ Инновационный Центр (2, 1)
  НИТУ МИСиС (Национальный исследовательский технологический университет) (1, 1)
  РОББО (ранее ScratchDuino, СкретчДуино) (1, 1)
  Другие (13, 13)

  Fora Robotics (Фора Роботикс) (1, 2)
  3D Bioprinting Solutions (3Д Биопринтинг Солюшенс) (1, 1)
  Dobot (Shenzhen Yuejiang Technology) (1, 1)
  Intuitive Surgical (1, 1)
  НИТУ МИСиС (Национальный исследовательский технологический университет) (1, 1)
  Другие (5, 5)

  КиберСклад (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Promobot - 26
  Cognitive Agro Pilot Система автоматического вождения - 21
  ABB IRB Промышленные роботы - 19
  Nvidia Drive AI-платформа для самоуправляемых автомобилей - 10
  Da Vinci (робот-хирург) - 9
  Другие 119

  ABB IRB Промышленные роботы - 8
  YuMi (Мобильный коллаборативный робот) - 4
  Promobot - 4
  Cognitive Agro Pilot Система автоматического вождения - 2
  Ronavi Robotics: H-серия Роботы для обслуживания складов - 2
  Другие 11

  Astabot Робот-палетный перевозчик - 1
  Gaskar Group Hive Автономные дронопорты - 1
  Робот-врач Promobot - 1
  МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1
  Smart Meal Service: Lunch fastPass Робот-кассир - 1
  Другие 9

  For-1 Антропоморфный робот - 2
  Da Vinci (робот-хирург) - 1
  Яндекс: Складские роботы - 1
  МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1
  Aripix A1 Робот-манипулятор - 1
  Другие 2

  Роботы КиберСклад - 1
  Другие 0