ИИ в хирургии на основе голосовых данных

3 недели назад наши коллеги из Клиники Фомина провели презентацию по началу внедрения искусственного интеллекта в хирургию на конференции «медовик» @medmarketingclub

Для того, чтобы сделать полноценного ИИ помощника в операционной, нужно очень много данных. А со сбором данных у нас в стране большая проблема.

Поэтому мы решили сделать первый шаг и сделать систему «авторегистратор» вместе с компанией Имотио. Такую штуку, которая начинает писать видео и звук сразу, как только ты включил стойку. Как бортовой самописец или «черный ящик» в авиации.

Мы пошли дальше и сделали так, чтобы эта штука (черный ящик) автоматически отправлял видео на сервер.

А уже на сервере видео подвергается речевому анализу с помощью ИИ от Имотио, где выявляются тревожные моменты операции. Например, если у хирурга кровотечение, он об этом обязательно скажет разными словами: либо напрямую «у нас кровит», либо косвенно «клипсу быстро», «салфетку, еще салфетку» и т.д. Либо он в этот момент ругнется. У любого хирурга, если операция идет через «ёп твою мать», означает, что что-то там не так.

Получился отличный инструмент для сквозного анализа большого массива операций.

Об этом и не только в презентации.

Это, напомню, первый шаг.

https://youtu.be/rqMFUTihNvg?si=YM8lhg0GBM9e5zKc

https://vkvideo.ru/video831351062_456240086

ИИ в хирургии на основе голосовых данных | Сетка — социальная сеть от hh.ru