Центр компетенций НТИ по направлению «Нейротехнологии, технологии виртуальной и дополненной реальности»

Центр компетенций НТИ по направлению «Нейротехнологии, технологии виртуальной и дополненной реальности»Центр компетенций Национальной Технологической Инициативы (НТИ) по направлению «Нейротехнологии, технологии виртуальной и дополненной реальности» на базе Дальневосточного Федерального Университета.

Деятельность Центра направлена на развитие таких передовых технологий и направлений, как виртуальная и дополненная реальность, цифровое проектирование и моделирование, UI/UX интерфейсы для VR/AR, нейроинжениринг, нейросистемы и вычисления.

Технологии и проекты, разрабатываемые Центром, будут способствовать созданию социально-технологической экосистемы применения нейротехнологий, технологий виртуальной и дополненной реальности.


Цели и задачи

Стратегической целью реализации программы Центра является достижение мирового уровня отечественных разработок в области нейротехнологий, технологий виртуальной и дополненной реальности в приоритетных сферах деятельности и вывод результатов на мировой рынок.

Основные задачи Центра группируются вокруг следующих направлений:

  1. Медицина

    Внедрение в отечественные и зарубежные системы государственного и частного здравоохранения реабилитационного комплекса (программно-аппаратный комплекс) для пациентов различной этиологии с применением технологий виртуальной и дополненной реальности, систем захвата движения, систем обратной связи); виртуальных тренажеров для медицинских манипуляций; алгоритмов оцифровки пациентов на основе технологии точного трекинга.

  2. Образование

    Создание универсальных научно-доказанных методик построения образовательного контента в виртуальной и дополненной реальности, создание и внедрение стандартов безопасности и санитарно-гигиенических требований, разработка платформенных решений для создания образовательного VR/AR-контента и международного маркетплейса образовательного VR/AR контента.



В научно-техническом направлении:

Разработка продуктов в области коммуникаций «человек-машина» и «человек-человек» в дополненной и виртуальной реальности, основанных на передовых психофизиологических технологиях и новых нейроинтерфейсах, повышающих продуктивность человеко-машинных систем.



По направлению образовательной деятельности:

Создание системы опережающей подготовки специалистов в области технологии рынка «Нейронет» для науки и промышленности, за счет разработки и реализации образовательных программ и модулей исходя из принципа максимального вовлечения обучающихся в деятельность на переднем крае науки, технологий и инновационной деятельности.



В части формирования инфраструктуры:

  • Развитие и внедрение институтов развития, технопарков, бизнес-инкубаторов, кластеров, технологических платформ, в целях:
    • расширения возможностей по разработке новых продуктов;
    • привлечения соинвесторов и партнеров для реализации новых проектов;
    • снижения собственных издержек на разработку новой продукции;
    • активного включения в российскую инновационную экосистему;
    • использования предоставляемых площадок для продвижения собственных разработок.

Результаты деятельности

Преодоление технологических барьеров

В 2019 году был создан реабилитационный программно-аппаратный комплекс с применением технологий виртуальной реальности и интерфейсов с двухсторонней связью, являющийся медико-технологическим решением проблемы двигательной реабилитации неврологических больных и ранней диагностики нейромышечных нарушений. Применение данного решения повышает эффективность реабилитации пациентов, перенесших ишемический инсульт, осложнившийся неврологическим дефицитом (гемипарез, монопарез), по предварительным оценкам, более чем на 25% и на треть снижающий время функционального восстановления, что позволит сформировать стандарты по разработке, внедрению и использованию программно-аппаратных комплексов в медицинской практике.

Значимые результаты научно-исследовательской деятельности

  • В 2020 году Центром начато клиническое исследование метода реабилитации с использованием виртуальной реальности и технологий с двухсторонней связью на базе передового Центра восстановительной медицины и реабилитации, расположенного на базе Медицинского центра ДВФУ. Результаты и данные, полученный в ходе апробации будут способствовать доработке технологий, их патентованию с целью создания полноценного импортозамещающего продукта и его масштабирования в федеральном масштабе.
  • В июле 2019 года впервые в России была применена технология инвазивной нейромодуляции для улучшения качества реабилитации: 3 пациентам, перенесшим осложненную позвоночно–спинномозговую травму сроком от 1 до 20 лет, были проведены операции и имплантированы матрицы электродов и стимуляторы. В короткий срок после операций удалось достичь осознанных движений в парализованных конечностях на фоне стимуляций. Пациенты продолжают проходить послеоперационную реабилитацию, разрабатывается мотивационный VR-контент.
  • В 2020 году был собран датасет Формирование «цифрового портрета» нейродегенеративных заболеваний с использованием систем захвата движения и интерфейсов двухсторонней связи: проведена регистрация моторных функций у двух групп пациентов с болезнью Паркинсона, произведена оцифровка моторной активности первой группы пациентов до установки стимуляторов.
  • В 2020 году завершилась разработка части комплекса образовательных тренажеров с использованием VR/AR для общего и среднего специального образования, куда вошли программы для физики, химии и английского языка. В рамках Программы апробации образовательного программного обеспечения в VR/AR 2020-2021 учебного года был создан прототип образовательного маркетплейса, где были представлены разработки Центра НТИ и участников Консорциума.

Создание важных объектов инфраструктуры

  • В 2020 году на базе Центра была открыта Совместная лаборатория виртуальной и дополненной реальности ДВФУ и ГК «Росатом». В рамках деятельности Совместной лаборатории планируются к реализации проекты с применением технологий VR/AR. По данному сценарию могут быть открыты совместные лаборатории и с иными государственными корпорациями и крупными компаниями.
  • Для реализации образовательного проекта в 2020 году началась активная работа по формированию сообщества представителей образовательных учреждений России. Проведено всероссийское анкетирование об опыте использования ПО для виртуальной и дополненной реальности в образовательном процессе, в котором приняли участие более 20 000 педагогов, по итогу анкетирования был сформирован аналитический отчет. Организована серия вебинаров и экспресс-курс, направленные на знакомство с технологиями виртуальной и дополненной реальности в образовании.

Внедрение и коммерциализация результатов деятельности Центра

В 2020 году завершилось создание большей части разработок, которые вошли в линейку образовательных продуктов в виртуальной реальности, представленной на Платформе образовательного программного обеспечения в VR/AR. Доступ к приложениям в виртуальной и дополненной реальности получили более 700 школ, в рамках реализации Программы апробации. Также в рамках проекта заключено 4 дистрибьюторских соглашения с компаниями Консорциума, 8 находятся на этапе согласования.

Создание и лицензирование РИДов

  • Количество созданных за время работы Центра НТИ объектов интеллектуальной собственности: 7
  • Количество заключенных Центром лицензионных соглашений: 307

Консорциум

Для реализации программы Центра компетенций НТИ образован Консорциум, объединивший ряд ведущих университетов, научных центров и технологических компаний, который ведет активную работу по созданию перспективных проектов в соответствующей области во взаимодействии с реальным сектором экономики, заказчиками и вендорами из России, Европы и Азии, профессиональным сообществом — Ассоциацией разработчиков дополненной и виртуальной реальности.

Список участников консорциума:

Научные и образовательные учреждения:

  • Университет ИТМО;
  • Факультет психологии МГУ имени М.В. Ломоносова;
  • ФГБОУ ВО СибГМУ Минздрава России;
  • Поволжский государственный технологический университет (г. Йошкар-Ола);
  • БФУ им. И.Канта (г. Калиниград);
  • Университет Иннополис (Россия, г. Иннополис);
  • Ульяновский государственный университет;
  • Иркутский государственный университет;
  • Череповецкий государственный университет;
  • Институт автоматики и процессов управления Дальневосточного отделения Российской академии наук (г. Владивосток);
  • Институт проблем морских технологий Дальневосточного отделения Российской академии наук (г. Владивосток);
  • «Фонд новых форм развития образования» (Кванториум);
  • Seoul National University (Seoul, Republic of Korea).

Партнеры из индустрии:

  • ПАО «Мобильные ТелеСистемы»; 
  • АО «Деус»; 
  • АО «Роббо»; 
  • Частная компания «Wargaming»; 
  • Государственная корпорация по атомной энергии «Росатом»; 
  • ООО «ДНС групп»; 
  • ООО «iVariant»; 
  • ООО «Модум Лаб»; 
  • ООО «СТЕМ-игры»; 
  • ООО «РУБИУС»; 
  • ООО «VR Concept»; 
  • ООО «Цереврум»; 
  • ООО «Нейросети Ашманова»; 
  • ООО «Мотив»; 
  • ООО «Лаборатория Виртуальной Реальности Дальний Восток»; 
  • ГК «VRTek»; 
  • ООО «Моторика»; 
  • ООО «Вижуал сайнс»; 
  • ООО «Цифровое пространство»; 
  • ООО «ВиАр Суперсоник»; 
  • ООО «Фибрум»; 
  • ООО «Медвиар»; 
  • ООО «Визерра» (Vizerra); 
  • ООО «Битроникс»; 
  • Петербургская Киностудия Виртуальной Реальности ЛенVR; 
  • ООО «ВИАР-НАУКА»; 
  • ООО «ЭДКОМ»; 
  • ООО «Лайка Интеллект»; 
  • ГК «Русские инвестиции»; 
  • ПАО «Сбербанк»; 
  • HTC Russia.

Иные организации (партнеры):

  • Российская академия образования;
  • Инновационный центр «Сколково»;
  • Кружковое движение НТИ.


Проекты

  • Реабилитационный программно-аппаратный комплекс с применением VR&AR и интерфейсов с двухсторонней связью и Клиническое исследование метода реабилитации с использованием виртуальной реальности и технологий с двухсторонней связью – VR-тренажер, синхронизированный с костюмом тактильной обратной связи TESLASUIT для реабилитации пациентов после инсульта. Разработка проходит этап клинических испытаний в Центре восстановительной медицины и реабилитации на базе Медицинского центра ДВФУ и доработки аппаратной части совместно с индустриальным партнером.
    https://vrnti.ru/med/rpak

  • Тренажер с применением технологий виртуальной реальности и методология для направленной хронической стимуляция спинного мозга (SCS) в реабилитации пациентов, перенесших осложненную спиномозговую травму – разработка программного решения для восстановления нейронных связей пациентов, перенесших позвоночно – спинномозговую травму с целью ускорения сроков и улучшения качества реабилитации. Единый комплекс реабилитации с использованием нейромодуляции, технологий роботизированной реабилитации (применение экзоскселета Exoatlet) и технологий VR/AR.
    https://vrnti.ru/med/scs

  • Формирование «цифрового портрета» нейродегенеративных заболеваний с использованием систем захвата движения и интерфейсов двухсторонней связи – цифровая экосистема для пациентов с нейродегенеративными заболеваниями (болезнь Паркинсона), цель которой – накопление информации о динамике изменения состояния пациента, моделирование и построение прогноза по развитию заболевания.
    https://vrnti.ru/med/data

  • Послеоперационная реабилитация верхних конечностей с применением VR – тренажер по реабилитации верхних конечностей с применением технологий виртуальной реальности.

  • Система оценки эффективности нейрохирургического вмешательства и реабилитации с использованием системы бесконтактного мониторинга позиционирования кисти – система бесконтактного мониторинга двигательной активности пациента при проведении нейрохирургического вмешательства.

  • Комплекс образовательных тренажеров с использованием VR/AR для общего и среднего специального образования - программное обеспечения для очков виртуальной реальности для следующих общеобразовательных дисциплин: математика, физика, химия, биология, английский язык, история. В 2020 году при поддержке Министерства посвящения РФ была организована всероссийская Программа апробации образовательного ПО (https://edu.vrnti.ru/approbation), благодаря которой около 1000 школ получили бесплатный доступ к разработкам.
    https://edu.vrnti.ru/

Образовательная деятельность

Модель образовательной деятельности Центра базируется на проектном подходе к организации обучения с дальнейшим выходом по его итогам на конкретный продуктовый результат, востребованный рынками НТИ и пригодный для дальнейшего трансфера и диффузии технологий виртуальной и дополненной реальности в смежные отрасли.

За 2018-2020 гг. в Центре было подготовлено 314 специалистов, из них 253 – в рамках программ бакалавриата и магистратуры, остальные – в рамках ДПО. Специалистами Центра разработано и запущено 2 программы магистратуры, а также 8 новых программ ДПО по тематике СКВОТ. Список всех образовательных проектов Центра представлен на сайте (https://ed.vrnti.ru/).

Основными задачами образовательных программ является подготовка программистов и молодых учёных в области компьютерных наук, способных использовать передовую материально-техническую базу Университета, включающую в себя весь спектр технологий для работы в области мобильного и PC-based VR/AR, Mixed Reality, систем захвата движения, а также основ математической статистики и математического моделирования и теории алгоритмов для решения наиболее актуальных прикладных и научных задач.


Команда

  • Вагнер Александр Рудольфович, директор Центра НТИ,
    nti@dvfu.ru

  • Крипакова Александра Витальевна, административный директор Центра НТИ,
    kripakova.av@dvfu.ru

  • Бондарь Анатолий Владимирович, руководитель сектора лицензирования и образовательного направления Центра НТИ,
    bondar.av@dvfu.ru

  • Хукаленко Юлия Сергеевна, научный сотрудник, руководитель образовательного проекта Центра НТИ,
    khukalenko.ius@dvfu.ru

  • Маштакова Екатерина Алексеевна, координатор медицинского направления Центра НТИ,
    mashtakova_ea@dvfu.ru



Контакты

Адрес: 690922, г. Владивосток, п. Аякс, 10, кампус Дальневосточного федерального университета
Тел.: +7(423)265-24-24, доб. 2470

Открытый отбор проектов НТИ

РВК проводит открытый отбор проектов НТИ, нацеленных на экспорт на зарубежные рынки технологических продуктов, разработку прорывных инновационных технологий, создание условий для компаний, работающих на рынках НТИ.

Медиа-центр

Новости проектов | Статьи
13.05.2020
Центр компетенций НТИ по направлению «Нейротехнологии, технологии виртуальной и дополненной реальности» на базе Дальневосточного федерального университета (ДВФУ) создает систему прогнозирования развития болезни Паркинсона с помощью ИИ.
16.04.2020
Медицинский центр ДВФУ получил разрешение на проведение клинической апробации реабилитационного программно-аппаратного комплекса с применением технологий виртуальной и дополненной реальности и интерфейсов с двухсторонней связью, разработанного в Центре компетенций НТИ VR/AR на базе ДВФУ.
Все новости
01.06.2021
К медиа-проекту InfoMedicine Reality Центра Национальной технологической инициативы по направлению «Нейротехнологии, технологии виртуальной и дополненной реальности» Дальневосточного федерального университета (НТИ ДВФУ по VR/AR) в Приморском крае подключился новый проект — NeuroV. Его цель — нейрореабилитация пациентов, переболевших новой коронавирусной инфекцией.
Все cтатьи
Место проведения: