Recognition of emotions and psychoemotional state of a person based on the analysis of physiological signals using deep neural networks
Eugene Yu. Shchetinin
Financial University under the Government of Russian Federation, Moscow, Russia
Research in the field of human-computer interaction (Human-Computer Interaction, HCI) has become one of the trends in the development of the IT industry of the 21st century. HCI systems find their potential application in social and biomedical engineering, neurobiology, neuromarketing, digital media, and other alternative areas of life that are significantly related to the emotional coloring of human activity. Their most important part is work aimed at recognizing human emotions. Consequently, with the increasing demand for HCI, methods for automatically recognizing human emotions will attract more and more attention from researchers and developers.
This study proposes a computer system for recognizing four psychoemotional states, which are peace, fear, happiness, and sadness, using EEG signals. The objectives of this study are; study the EEG signals and their characteristics, develop a recognition system based on the EEG, as well as evaluate the efficiency of this system on open databases of physiological signals.
Распознавание эмоций и психоэмоционального состояния человека на основе анализа физиологических сигналов с использованием глубоких нейронных сетей
Щетинин Е. Ю.
Финансовый университет при Правительстве РФ, Москва, Россия
Исследования в области взаимодействия человека и компьютера (Human Computer Interaction, HCI) стали одним из трендов развития IT-индустрии 21-века. Системы HCI, находят свое потенциальное применение в социальной и биомедицинской инженерии, нейробиологии, нейромаркетинге, цифровых медиа и других альтернативных областях жизни, которые существенно связаны с эмоциональной окраской деятельности человека. Важнейшей их частью являются работы направленные на распознавание эмоций человека. Следовательно, с увеличением спроса на HCI методы автоматического распознавания человеческих эмоций будут привлекать все большее внимание исследователей и разработчиков.
Большинство исследований по распознавание эмоций основано на анализе текста, речи, жестовых движений и мимики, но есть много ограничений для вышеупомянутых методов. Так распознавание эмоций с помощью текста применяется к словам или предложениям на определенном языке, поэтому довольно трудно разработать универсальную систему с использованием текста. Распознавание эмоций с помощью мимики имеет много преимуществ, но мимика не всегда связана с внутренними эмоциями, поскольку мимику можно сознательно контролировать. В результате эмоции не могут быть распознаны точно. Распознавание эмоций с помощью речи намного проще, чем вышеперечисленные два, но речь варьируется от человека к человеку с разной культурой или географией, поэтому техника распознавания речи также не позволяет добиться истины.
Чтобы справиться с этими ограничениями оказалось возможным использовать для анализа эмоций с помощью HCI физиологические сигналы, которые каждый человек генерирует из различных частей своего тела. Существует много преимуществ мониторинга физиологических паттернов организма, контролируемых нервной системой, на которую влияют человеческие эмоции. Существуют различные датчики, которые могут быть использованы для сбора физиологических сигналов, таких как ЭКГ, ЭМГ, ЭЭГ, проводимость кожи, температура кожи и объемный пульс крови (BVP). В последнее время биологические сигналы, такие как фотоплетизмограмма (ФПГ), электроэнцефалограмма (ЭЭГ), электрокардиограмма (ЭКГ) и акселерационная плетизмограмма (АПГ), были предложены в качестве метода обнаружения вариабельности эмоций. Вся эта информация может быть получена с помощью физиологических приборов, которые измеряют частоту сердечных сокращений, кровяное давление, уровень насыщения кислородом, уровень глюкозы в крови, нервную проводимость и активность мозга.
Однако наше исследование будет больше сосредоточено на распознавании эмоций с помощью ЭЭГ-сигналов. Это связано с тем, что с их помощью возможно более точно определять активность человеческого мозга с помощью устройства сбора данных высокого разрешения по сравнению с другими биологическими сигналами. Изменения в электрической активности человеческого мозга происходят очень быстро, поэтому для точного определения эмоции требуется приборы с высоким разрешением. Быстрое развитие новых носимых, удобных, недорогих беспроводных гарнитур для измерения ЭЭГ и классификации сигналов ЭЭГ без участия обученных специалистов значительно расширило их использование в других областях, таких как электронное обучение, видеоигры, виртуальная реальность, телемедицина и т. д.
17 views
726
320
11 months ago 00:57:21 1
ШКОЛА ТРЕТЬЕГО ТЫСЯЧЕЛЕТИЯ 2023 Лучшую в мире школу СОХРАНИЛИ ПАТРИОТЫ РОССИИ
11 months ago 02:45:03 1
Полная версия фильма ШКОЛА ТРЕТЬЕГО ТЫСЯЧЕЛЕТИЯ 2023 Михаил Щетинин Шалва Амонашвилли #ШколаБудущего
11 months ago 00:11:44 1
Дыхательная гимнастика Стрельниковой А. Н
12 months ago 00:47:35 323
Требуется мама. 1 из 4
12 months ago 00:49:23 331
Требуется мама. 2 из 4
12 months ago 00:44:05 268
Требуется мама. 3 из 4
12 months ago 00:48:23 313
Требуется мама. 4 из 4
12 months ago 00:17:53 1
Как делать дыхательную гимнастику Стрельниковой Щетинин М Н
12 months ago 00:27:03 1
Дыхательная гимнастика Стрельниковой. Основной комплекс.
12 months ago 00:29:02 94
Обвал на рынке. Первому игроку приготовиться. Блог Яна Арта -
12 months ago 00:11:12 1
Новичок на фуре чуть не замерз в степи
12 months ago 00:37:12 1
Школа Щетинина
12 months ago 00:35:21 1
ЩЕТИНИН МИХАИЛ ПЕТРОВИЧ .Ченнелинг.Регрессивный гипноз
12 months ago 01:27:35 1
Михаил Щетинин - гимнастика Стрельниковой, избавиться от астмы навсегда и не пользоваться балоном.
12 months ago 00:07:39 1
Владивосток, сквер имени А. И. Щетининой, сентябрь 2023 г.
12 months ago 10:11:56 1
IX Летняя Спартакиада ГК ИНК - 2023
1 year ago 00:34:15 3
Пенсионерка Лариса Морозова инвестирует 10 лет, живет на дивиденды и уже объехала 65 стран
1 year ago 00:47:24 1
“(Не)обыкновенное чудо“ - новогодний концерт Факультета управления и политики МГИМО 2022
1 year ago 03:10:16 1.1K
Уходящий год. 3 часовая мелодрама
1 year ago 00:42:12 3
Школу Щетинина закрывают! Срочные репосты!
1 year ago 00:20:34 4
Школа Щетинина | Поступление-2017
1 year ago 01:37:19 2.9K
🎥 |2008| ВАЛЛ-И (50 fps) ❉ Мультфильм.
1 year ago 00:46:07 1
Школа Щетинина | Текос | 2020
1 year ago 02:11:52 1
Странная миссис Сэвидж. Джон Патрик. Радиоспектакль 1976год.