Ученые из Университета науки и технологии UNIST создали технологию, которая позволяет в режиме реального времени определять эмоции человека. Эта разработка может произвести революцию в различных областях, особенно в сфере создания новых поколений устройств для ношения, которые смогут предоставлять услуги в зависимости от эмоций пользователя.
Ранее точное извлечение эмоциональной информации было сложной задачей из-за абстрактной и неоднозначной природы человеческих реакций, таких как эмоции, настроение и чувства. Однако новая мультимодальная система для распознавания человеческих эмоций объединяет данные вербальных и невербальных сигналов, что позволяет эффективно использовать комплексные эмоциональные данные.
Система базируется на интерфейсе PSiFI, который является автономным, удобным в использовании, растяжимым и прозрачным. Он оснащен уникальным трибоэлектрическим двунаправленным датчиком деформации и вибрации, который позволяет одновременно собирать и объединять данные о вербальных и невербальных проявлениях эмоций. Благодаря интеграции с системой обработки данных и беспроводной передачи информации, система обеспечивает быстрое распознавание эмоций.
Технология использует алгоритмы машинного обучения для точного и быстрого распознавания человеческих эмоций, даже когда лицо человека закрыто маской. Система распознает эмоции в режиме реального времени благодаря интеграции обнаружения деформации лицевых мышц и вибраций голосовых связок.
Система работает на основе явления “трибоэлектрического эффекта” — зарядки при трении, и поэтому не требует внешнего источника питания или сложного оборудования для сбора данных.
Разработчики новой технологии отмечают, что интерфейс PSiFI может быть адаптирован под индивидуальные особенности каждого пользователя благодаря использованию технологии полуотвердевания при создании прозрачного проводника для трибоэлектрической зарядки. Также с помощью многоточечной съемки создана персонализированная маска, которая сочетает в себе гибкость, эластичность и прозрачность.
Новая технология уже используется в виртуальной реальности для создания цифрового консьержа, который может предоставлять персонализированные рекомендации в различных ситуациях, включая использование в умных домах, частных кинотеатрах и офисах. Система способна определять индивидуальные эмоции пользователей и на основе этой информации предлагать соответствующую музыку, фильмы или книги.
Разработчики продемонстрировали высокую эффективность новой системы распознавания эмоций в реальных условиях. Система собирает данные о деформации лицевых мышц и вибрации голосовых связок, что позволяет точно определять эмоции человека в режиме реального времени. Это не только улучшает наше понимание человеческих эмоций, но и создает новые возможности для разработки персонализированных технологий и сервисов, основанных на эмоциональных реакциях пользователей.
По материалам securitylab
