Мельник О.В., Саблина В.А., Яковлев Н.В. «Исследование возможностей создания наборов данных выражений лица с помощью прослушивания музыки» Биомедицинская радиоэлектроника, 28, № 4, с. 62-71 (2025)

Постановка проблемы. В настоящее время развитие исследований в области анализа микровыражений лица человека ограничивается сложностью получения наборов данных для экспериментов. В качестве простого и легко реализуемого подхода к созданию необходимых наборов данных предлагается использование музыкальных произведений в качестве стимулов, вызывающих у человека различные эмоции. Однако в этом случае необходимо четкое описание процессов подготовки участников, выбора музыки, осуществления видеозаписи и автоматизированного обнаружения и распознавания выражений лица с помощью программных средств. Также необходимо отдельно выявлять макро- и микровыражения, а также тонкие выражения. Создаваемые с помощью прослушивания музыки наборы данных можно будет использовать в исследованиях по направлениям распознавания скрытых эмоций и диагностики психоэмоционального состояния человека. Цель. Разработать подходы к созданию наборов данных выражений лица человека, соответствующих проявлениям различных эмоций под воздействием музыки. Результаты. В ходе исследования создан небольшой экспериментальный набор данных выражений лица для пяти участников путем прослушивания ими трех музыкальных произведений и одновременного осуществления видеозаписи с помощью высокоскоростной камеры. Построены и проанализированы графики зависимостей вероятностей проявления различных эмоций от времени для участников эксперимента. При этом макровыражения в основном распознаны как нейтральные. Дополнительно обнаружено по четыре микровыражения у двух участников эксперимента, а также одно тонкое выражение. Анализ проведен с помощью различных программных средств. Показана возможность создания наборов данных макровыражений, микровыражений и тонких выражений лица с помощью прослушивания музыки. Даны общие рекомендации для проведения подобных экспериментов. Практическая значимость. Проведенное исследование позволит создавать наборы данных выражений лица для дальнейшего анализа макровыражений, микровыражений и тонких выражений.