Практика совершенствуется, и в настоящее время тестируется и совершенствуется новая система, которая позволяет стажерам-хирургам получать новейшие инструкции в режиме реального времени с помощью новой программы искусственного интеллекта.
Пока студенты-медики выполняют хирургические упражнения, программное обеспечение искусственного интеллекта сканирует видеотрансляцию в реальном времени и предоставляет немедленную персонализированную обратную связь. Это решение относится к первому поколению учителей с искусственным интеллектом, предоставляющих обратную связь в режиме реального времени, и может стать пионером в использовании аналогичных технологий обучения в других отраслях, включая дополнительные области здравоохранения и медицины.
Преподаватель искусственного интеллекта разрабатывается доцентом Усманом Рошаном на факультете науки о данных Колледжа вычислительной техники Ин Ву Технологического института Нью-Джерси совместно с коллегами из Медицинской школы Роберта Вуда Джонсона (RWJ) и Robust AI, компании-разработчика программного обеспечения, специализирующейся на искусственном интеллекте. продукты для распознавания человеческой деятельности.
Рошан в сотрудничестве с доктором Адвайтом Бонгу — хирургом-трансплантологом и директором по хирургическому моделированию в RWJ — и инженером искусственного интеллекта Юнже Сюэ из Robust AI разрабатывают платформу с 2023 года и совершенствуют ее для обучения студентов в RWJ, надеясь на включение его в учебную программу в 2025 году.
На данный момент эта работа была удостоена награды Rutgers Medical Educator Innovator и представлена на хирургических совещаниях и конференциях, включая Международную конференцию IEEE по биоинформатике и биомедицине в Стамбуле .
Практика совершенствуется, а новая система тестируется и совершенствуется, которая позволяет стажерам-хирургам получать новейшие инструкции в режиме реального времени с помощью новой программы искусственного интеллекта. Фото: Фото: Усман Рошан
По словам Бонгу, симуляция стала общепринятой частью учебной программы по хирургии. Стажеры-хирурги со временем развивают навыки лапароскопии и до окончания учебы должны получить сертификат по основам лапароскопической хирургии (FLS). Эти симуляции, хотя и экономически эффективны и безопасны для пациентов, не имеют компонента автоматической оценки и требуют постоянного контроля и обратной связи вручную.
Лапароскопическая хирургия, также известная как минимально инвазивная хирургия, выполняется через небольшие разрезы с использованием специальных инструментов и крошечной камеры, называемой лапароскопом.
Бонгу добавляет: «Наше внимание было сосредоточено на первой задаче FLS, в которой жители используют захваты для переноса шести колец с одного набора колышков на другой, а затем обратно к исходному набору колышков, не роняя привязку из-за ограничений по времени».
Однако программа представляет собой нечто большее, чем компьютеризированную версию игры «Операция».
Программное обеспечение, разработанное и внедренное Сюэ, использует базовую модель компьютерного зрения для однопроходного обнаружения объектов «Вы смотрите только один раз» для обнаружения «операции» и ее компонентов. Затем он определяет, прошел или не прошел учащийся симуляцию, и предоставляет обратную связь об успеваемости и указанном направлении обучения — и все это в виде видео в реальном времени , которое полностью воспроизводится на ноутбуке, который одновременно выполняет функцию монитора симуляции.
«Система изучает действия учащихся, когда они выполняют их вживую, и дает им немедленную и автоматическую оценку с визуальными и звуковыми подсказками в сценарии, который кажется практически «живым», — сказал Рошан.
Эндрю Ху, ординатор второго курса хирургии RWJ, в прошлом году помогал в тестировании системы.
«Мы очень воодушевлены этим проектом, поскольку он выходит за рамки ажиотажа вокруг генеративного искусственного интеллекта и переходит в сферу помощи людям в лучшем обучении. Мы ожидаем более широкого использования нашего программного обеспечения в программах хирургической подготовки по всей стране и, в конечном итоге, в других областях человеческого обучения. где речь идет о физической активности », — сказал Рошан.
