Вместо того чтобы улучшить эффективность работы разработчиков, авторы исследования зафиксировали снижение их продуктивности из-за применения нейросетевых помощников.
В последние годы профессия инженера-программиста переживает серьезные изменения благодаря массовому внедрению искусственного интеллекта. Спрос на такие инструменты, как Cursor и GitHub Copilot, значительно возрос, так как они обещают повысить продуктивность за счет автонаписания кода и исправления ошибок. Однако на практике оказалось, что ИИ не улучшает производительность опытных специалистов, а, наоборот, замедляет их.
Новое исследование, проведенное некоммерческой группой METR, ставит под сомнение мнение о том, что чат-боты содействуют программистам. Ранее считалось, что ИИ сокращает время написания кода на 24%. Однако на деле нейросети увеличивают время, затрачиваемое на кодинг, на целых 19%. Это стало возможным благодаря участию 16 опытных разработчиков в эксперименте по решению 246 реальных задач в крупных репозиториях кода.
Причиной этого, как пояснили в METR, является то, что программисты тратят много времени на формулирование задач для чат-ботов и ожидание ответов. Выяснилось, что человек пишет код быстрее, чем машина. ИИ с трудом справляется с большими и сложными кодовыми базами, использовавшимися в тестировании.
Тем не менее, авторы исследования не отказываются от применения искусственного интеллекта. Они подчеркивают, что чат-боты могут ускорить процесс разработки, но не всегда и не для всех задач. Кроме того, другие масштабные эксперименты показывают, что нейросети все же способны повышать эффективность разработчиков. Также стоит отметить, что ИИ-инструменты продолжают развиваться, и текущие результаты, полученные в ходе исследования, вряд ли останутся актуальными в будущем. Однако полагаться исключительно на ИИ не следует — его нужно использовать только когда это действительно оправдано.
Фото: hi-tech.mail.ru
