Вход
img

Вы уверены, что хотите выйти из аккаунта?

Грант РФФИ 19-37-90129 Аспиранты

Принципы передачи многомодальной информации в роботизированных системах

Срок выполнения: 2019-2021

Руководитель проекта: д.т.н. Веселов Г.Е.

Исполнители проекта: аспирант кафедры синергетики и процессов управления Рындин А.В.

Аннотация:

В современном мире цифровизация проникает в каждый аспект жизни индивида. Появление роботизированных систем уже более не фантастика, а реальное настоящее. Область применения роботизированных систем крайне широка: от домашних помощников до полностью автономных роботизированных производств. Одним из подклассов подобных систем можно выделить системы удаленной телемедицины, позволяющей провести диагностику состояния индивида на расстоянии, например, в удаленных населенных пунктах, где нет оперативного доступа к медицинской помощи или при чрезвычайных ситуациях.

Одной их основных задач подобных систем является съем физиологических параметров пользователя, передача их на контрольный пункт, и принятие решения о дальнейших действиях системы. Физиологические параметры пользователя представляют особой модальности. Однако при разработке таких систем возникает целый ряд задач, которые необходимо решить. Одной из наиболее актуальных является обеспечение бесперебойной, надежной связи элементов мобильной роботизированной системы в беспроводной сети, другой – обеспечение безопасности передаваемых данных, что наиболее актуально при передаче многомодальной информации. Кроме того, параметры различных модальностей пользователей имеют разные статистические характеристики, что обуславливает неоднородность передаваемого по сетям связи потока данных. Мобильность элементов роботизированной системы не может гарантировать надежную бесперебойную беспроводную связь, что значительно влияет на качество восприятия пользователя (Quality of Experience, QoE) при передаче данных.

Решение данных задач связано с разработкой научно-методического инструментария передачи многомодальной информации, который позволит обеспечить эффективность и безопасность передачи многомодальной информации в гетерогенной сети. В рамках проекта предлагается разработать новую методику передачи многомодальной информации в гетерогенной сети в мобильных роботизированных системах, которая впервые рассматривает возможность передачи различных модальностей и их комбинаций в мультипотоковом сценарии передачи данных.

Цель и задачи Проекта:

В рамках проекта планируется разработать принципы и методику передачи многомодальной информации, обеспечивающих мониторинг состояния пользователя и позволяющих осуществлять удаленное управление робототизированными системами. Для создания системы будет исследован новый подход к многомодальному представлению информации и ее передачи посредством гетерогенных сетей доступа и схемы мультипотоковой передачи данных. Реализованные на его основе программные средства позволят реализовать комфортное дистанционное обслуживание пользователей в роботизированных системах.

Публикации:

  1. Ryndin A., Pakulova E., Veselov G. Analysis of multimodal information for multi-robot system // HCI International 2020, 2020 (ожидается публикация сборника в сентябре 2020)
  2. Pakulova E., Ryndin A., Basov O. Multi-path multimodal authentication system for remote information system // 12th International conference on Security of Information and Networks, 2019.
  3. Poleshenkov, D., Pakulova, E., Basov, O., & Ryndin, A. (2020, June). A Heart Rate Extraction from the Speech Signal Without a Priori Information About the Speaker. In 2020 International Wireless Communications and Mobile Computing (IWCMC)(pp. 589-594). IEEE.
Перейти к содержимому