Российские ученые создали методы, позволяющие легким системам ИИ распознавать составные эмоции, а также анализировать выражения лиц, отслеживать лицевые движения и определять интенсивность эмоций, не передавая данные пользователей в «облако».
Эти алгоритмы открывают новые горизонты для анализа сложных человеческих эмоций в реальных условиях. «Предложенные методы показывают, что эффективные легкие модели с грамотной постобработкой могут успешно соперничать с громоздкими ансамблями сложных нейросетей. Все модели и исходный код доступны в открытой библиотеке, что дает возможность другим исследователям развивать это направление, а для бизнеса их применение может стать настоящей революцией в цифровом маркетинге и анализе пользовательского опыта», — говорится в сообщении.
Как подчеркивается в сообщении, способность искусственного интеллекта распознавать базовые и смешанные человеческие эмоции на видеозаписях, аудиофайлах и изображениях позволяет значительно улучшить взаимодействие человека и компьютера, делая его более естественным и эмпатичным. В настоящее время для этого используются сложные и ресурсоемкие методы, которые крайне трудно или невозможно реализовать на пользовательских устройствах.
Для решения этой задачи российские ученые создали серию легких нейросетей, способных распознавать составные эмоции, комбинирующие несколько базовых переживаний, а также определять выражения лиц, их знаки и интенсивность эмоций, а также классифицировать лицевые движения. Ключевым моментом в их создании стало применение разработанных исследователями подходов для извлечения эмоциональных признаков, а также специализированные методы постобработки и сглаживания предсказаний.
По словам разработчиков, предложенный подход значительно повышает точность определения эмоций с помощью легких нейросетей, что позволяет им конкурировать с более вычислительно сложными методами. Эти преимущества помогли исследователям получить серебряные медали на международном конкурсе по распознаванию эмоций ABAW, который проходил в рамках Европейской конференции по компьютерному зрению (ECCV).
Эти алгоритмы, как надеются ученые, помогут производителям смартфонов и умных устройств создать более чувствительные системы взаимодействия с пользователем, врачи смогут использовать их для раннего выявления эмоциональных расстройств, а автопроизводители смогут интегрировать их в системы, отслеживающие состояние водителей. Во всех этих случаях предложенный подход может быть использован для того, чтобы сделать анализ сложных эмоций точным, доступным и безопасным, подытожили исследователи.
Фото: hi-tech.mail.ru