В России была разработана система, способная определять эмоции человека на основе анализа видео и аудио данных

По точности функционирования новое отечественное решение превосходит имеющиеся аналоги. Рассматриваем особенности работы программной системы MASAI.MASAI скриншотИнтерфейс программы MASAI.Источник: new.ras.ru

Специалисты Санкт-Петербургского Федерального исследовательского центра РАН разработали интеллектуальную программу MASAI. Она состоит из системы нейронных сетей, которые способны анализировать эмоции и настроение человека на основе визуальных, аудиальных и текстовых данных. Новая технология открывает возможности для создания цифровых ассистентов нового поколения, работающих на принципах эмоционального ИИ, отмечается на сайте Российской академии наук.

MASAI построена на основе комплекса нейросетей, обученных на многочисленных открытых исследовательских базах данных, содержащих мультимодальные записи (аудиовизуальная информация) людей разных возрастов, полов и национальностей. Для формирования русскоязычной части базы привлекались студенты театральных учебных заведений, которые воспроизводили широкий спектр человеческих эмоций.

Программа способна выявлять семь основных человеческих эмоций: радость, грусть, страх, отвращение, удивление, злость и спокойствие. Также она может осуществлять сентимент-анализ информации, определяя отношение человека (отрицательное, положительное или нейтральное) к определенному событию.

эмоции иллюстрацияТочность распознавания эмоций превышает имеющиеся аналоги и достигает 80%.Источник: Unsplash

Отечественное решение предоставляет возможность загружать и обрабатывать любые аудиовизуальные файлы через удобный интерфейс. Система автоматически выполняет анализ поступивших данных и предоставляет результаты о распознавании эмоционального состояния и общего настроения. Заявленный уровень точности работы — 75−80%. По данным, результат превосходит ранее разработанные аналоги.

«Система MASAI может быть интегрирована в различные типы цифровых помощников, которые в настоящее время применяются во многих сферах жизни. Например, в службах скорой помощи или психологической поддержке, где эмоциональный искусственный интеллект сможет более эффективно реагировать на потребности человека», — комментирует руководитель Лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН Алексей Карпов.

В настоящее время программа способна распознавать эмоции как по предварительно сохраненным аудиовизуальным материалам, так и в реальном времени. Она анализирует мимику лица и голосовые характеристики говорящего.

Фото: hi-tech.mail.ru

Оцените статью
Dfiles.ru