🧑💻 ИИ замедляет опытных программистов
Исследовательский институт ИИ METR обнаружил, что при использовании ИИ опытные разработчики тратят больше времени на задачи, хотя ощущают себя продуктивнее.
В эксперименте 16 программистов (в среднем с более 10 годами стажа) выполнили 246 задач в крупных open-source репозиториях, с которыми были хорошо знакомы. Часть задач решали с помощью Cursor, часть — «по старинке» без ИИ. Использовать нейросети или нет определяли случайно.
Кодеры ожидали, что ИИ ускорит их на 24%, но на практике с нейросетями работа шла на 19% дольше. Дополнительное время ожидаемо ушло на написание промптов, ожидание ответов от ИИ и проверку сгенерированного кода.
Сами программисты даже после завершения задач оставались уверены, что ИИ ускорил их на 20%. При этом сторонние эксперты вовсе ожидали рост продуктивности почти на 40%.
Дело в излишней уверенности в способностях ИИ, считают исследователи. Но фактически ответы нейросетей нередко оказываются неточными, узкое контекстное окно мешает непрерывной работе, а в хорошо знакомых репозиториях ценность советов от ИИ снижается.
Но авторы отмечают, что ИИ не обязательно снижает продуктивность. Другие исследования показывают, что ИИ ускоряет работу в небольших проектах и помогает быстрее разбираться в незнакомых вещах, что полезно скорее начинающим и неопытным программистам.
Для опытных разработчиков ИИ может сделать процесс проще и приятнее, что в психологическом плане важнее скорости.
👋 Подпишитесь на Hi, AI!
#новости #наука
