Устройства, софт, API, SDK

Командой Neiry был разработан программный комплекс, способный распознавать активирующие команды непосредственно из ментальных команд пользователя и передавать эти команды на медицинское ПО. Управление происходит с помощью мигающих на экране кнопок, которые появляются поверх любой существующей медицинской программы. Для выбора подходящего действия, хирургу нужно всего лишь 1 секунду посмотреть на нужную кнопку. При этом необходимо отметить, что управление происходит с сохранением полной стерильности.

Решение реализовано с использованием ЭЭГ-устройства Neiry Headband и софта, работающего в парадигме SSVEP.

Такая техника контроля управления универсальна для всех хирургов, не требует обучения и не отнимает внимания и энергии. Neiry готово поделиться разработками и опытом с заинтересованными компаниями.

С ЭЭГ-гарнитуры по беспроводной связи на компьютер нейрофизиолога поступали данные о сигналах мозга участников эксперимента — электроэнцефалограммы. Далее полученные цифровые показатели загружались в программу по созданию компьютерной графики и проходили процесс преобразования в визуальный образ по заранее написанному алгоритму программирования. В эксперименте приняло участие 40 человек. Все желающие получили уникальную визуализированную работу нейронов головного мозга и сделанный на основе этого персонализированный NFT.

Реализовано с помощью Neiry Headband и софта Capsule. Электроэнцефалограмма каждого участника была экспортирована в .csv и передана 3D-визуализатору для создания графики и в дальнейшем — в NFT.

Neiry готовы поделиться технологией и к коллаборациям в арт-перфомансах.

Используя многолетний опыт работы с нейрофидбек-специалистами со всего мира и глубокое понимание нейрофизиологии, разработчики сделали бесплатное приложение с продвинутыми алгоритмами, адаптирующими программу тренировок под каждого пользователя исходя из его персональных успехов.

Продукт работает на ЭЭГ-хэдбэнде, аналогичном Neiry Headband, и на биологической обратной связи в рамках приложения для iOS и Android на Unity.

BrainBit заинтересован в развитии технологии и открыт к обсуждению совместных проектов.

Продукт ориентирован на аэрокосмическую отрасль, где ожидается рост спроса на услуги по обучению в связи с необходимостью переучивания персонала на новые типы воздушных судов и с возобновлением их эксплуатации после пандемии. 

На текущий момент собрана научная база и проведены первые два этапа исследований, целью которых является сбор данных и тестирование гипотез, направленных на поиск оптимальных алгоритмов работы системы. В исследованиях приняло участие 17 действующих пилотов, которые выполняли тренировочные задания на авиатренажерах Airbus-A320, Boeing-737, Cessna-C172 и ТУ-154. Продолжается анализ полученных данных и формирование ТЗ на создание прототипа системы.

Продукт состоит из авиационной гарнитуры со встроенными датчиками ЭЭГ, ЧСС, ЭМГ и приложения, устанавливаемого на планшет инструктора. Нейрогарнитура осуществляет мониторинг физиологических параметров пилота в режиме реального времени и по беспроводной связи передает на планшет информацию, обозначая в простой наглядной форме параметры функционального состояния пилотов, в том числе его смещение от оптимального в сторону перенапряжения и истощения. Инструктор на основании дополнительных данных получает возможность корректировать параметры тренировки и адаптировать их под конкретного пилота, упрощая или усложняя тренировочное задание. На текущем этапе продукт реализован на нейрогарнитуре Neiry Headband Pro, а в дальнейшем необходимые датчики будут встроены в авиационную гарнитуру.

Проект находится на этапе создания прототипа системы и поиска партнеров для совместной реализации пилотных проектов, тестирования технологии и адаптации конечного продукта под нужды заказчиков.

Благодаря VR-формату и необходимости концентрироваться на карточке с ответом, преподавателю удавалось удерживать фокусировку и погружение учеников в образовательный процесс, что повышало уровень усваиваемости пройденного материала.

Приложение было реализовано на базе Unreal Engine 4 с использованием парадигмы P300, работает на stand-alone устройстве Neiry Impulse VR, сочетающее в себе нейроинтерфейс и VR-очки Pico.

Neiry готово поделиться разработками и опытом с заинтересованными командами.

В рамках проекта была спроектирована и реализована полноценная компьютерная VR-игра.

Игровая часть контента была разработана на Unreal Engine 4, программная часть (нейроинтерфейсная) была разработана на C++ с использованием парадигмы P300.

В качестве аппаратной части использовался ПК на Windows и шлем виртуальной реальности Neiry Impulse VR.

На текущий момент проект поставлен на паузу, компьютерная игра доступна для демо и тестирования в офисе компании Neiry.

Командой проекта было реализовано несколько учебных тестов по биологии и математике, в которых детям было необходимо концентрироваться на выбранном ответе, чтобы пройти дальше. Преподаватели подтверждали ценность таких занятий, видя интерес учеников к этому способу повторения материала и позитивный наглядный эффект в виде более быстрого закрепления полученных знаний.

Решение было реализовано на Unreal Engine 4 и Neiry Impulse VR на парадигме P300.

Проект был завершен ввиду сложности массовой интеграции в учебные заведения. Прямо сейчас он доступен для демонстраций по запросу.