Российские ученые разработали крупнейший в мире открытый набор данных, предназначенный для оценки способности робототехнических систем эффективно и точно воспринимать просьбы людей и интерпретировать потенциально неоднозначные инструкции. Об этом сообщает пресс-служба Института искусственного интеллекта AIRI. 
«В ходе исследования был собран текстовый набор данных, содержащий 2 тыс. задач с разметкой по типу неоднозначности для действий на кухне. Результаты показали, что существующие алгоритмы на данный момент недостаточно эффективно справляются с распознаванием ситуаций, требующих уточнения: даже лучшие модели демонстрируют успешный результат лишь в 20% случаев», — говорится в сообщении.
Новый тест для роботов был создан группой исследователей Института AIRI и МФТИ при поддержке Центра робототехники «Сбера». Он представляет собой набор из обычных бытовых ситуаций, с которыми может столкнуться робот при интерпретации различных неполных или неоднозначных инструкций человека, связанных с выполнением различных задач на кухне.
Как объясняют исследователи, многие простые инструкции, в частности, просьба принести что-нибудь попить, содержат в себе массу неопределенности и неочевидных предпочтений, которые крайне сложно интерпретировать ИИ. Управляющие системы роботов могут попытаться решить эти проблемы при помощи уточняющих вопросов, большое количество которых будет утомлять пользователя, что требует применения иных подходов для получения информации.
Для оценки способности роботов действовать в таких ситуациях российские ученые подготовили набор из 2 тыс. сценариев с детальным описанием задачи, обстановки на кухне, возможных уточняющих вопросов и планов действий. Часть из этих задач была сформулирована максимально четко и могла быть интерпретирована однозначно, тогда как другие были неоднозначными и разбиты на три категории — предпочтения людей, здравый смысл и безопасность.
Такое разбиение, по словам исследователей, позволит разработчикам роботов и ИИ-систем для них гибко корректировать работу этих алгоритмов и делать роботов более адаптивными и удобными для человека. Как отметил руководитель группы «Воплощенные агенты» лаборатории «Когнитивные системы ИИ» Института AIRI Алексей Ковалев, этот тестовый набор также поможет в разработке систем, занимающихся планированием поведения роботов и способных оценивать, на каком этапе плана действий машины возникает неоднозначность.
Фото: hi-tech.mail.ru