?? ИИ замедляет опытных программистов Исследовательский институт ИИ METR обнаружил, что при исполь
?? ИИ замедляет опытных программистов
Исследовательский институт ИИ METR обнаружил, что при использовании ИИ опытные разработчики тратят больше времени на задачи, хотя ощущают себя продуктивнее.
В эксперименте 16 программистов (в среднем с более 10 годами стажа) выполнили 246 задач в крупных open-source репозиториях, с которыми были хорошо знакомы. Часть задач решали с помощью Cursor, часть — «по старинке» без ИИ. Использовать нейросети или нет определяли случайно.
Кодеры ожидали, что ИИ ускорит их на 24%, но на практике с нейросетями работа шла на 19% дольше. Дополнительное время ожидаемо ушло на написание промптов, ожидание ответов от ИИ и проверку сгенерированного кода.
Сами программисты даже после завершения задач оставались уверены, что ИИ ускорил их на 20%. При этом сторонние эксперты вовсе ожидали рост продуктивности почти на 40%.
Дело в излишней уверенности в способностях ИИ, считают исследователи. Но фактически ответы нейросетей нередко оказываются неточными, узкое контекстное окно мешает непрерывной работе, а в хорошо знакомых репозиториях ценность советов от ИИ снижается.
Но авторы отмечают, что ИИ не обязательно снижает продуктивность. Другие исследования показывают, что ИИ ускоряет работу в небольших проектах и помогает быстрее разбираться в незнакомых вещах, что полезно скорее начинающим и неопытным программистам.
Для опытных разработчиков ИИ может сделать процесс проще и приятнее, что в психологическом плане важнее скорости.
? Подпишитесь на Hi, AI!
#новости #наука
Комментарии