Ученые компании Anthropic провели исследование, которое показало снижение качества обучения у начинающих программистов при использовании ИИ-помощников. В ходе эксперимента новички с доступом к ИИ хуже справились с тестом на понимание концепций, чем те, кто писал код самостоятельно. Об этом сообщает iXBT со ссылкой на исследование Anthropic.

В эксперименте приняли участие 52 начинающих разработчика, которых разделили на две группы. Им предстояло изучить незнакомую библиотеку Trio для Python. Одна из групп могла пользоваться ИИ-помощником.

По итогам задания группа с ИИ-помощником правильно ответила на 50% вопросов теста на понимание, в то время как контрольная группа — на 67%. При этом разница в скорости выполнения задания составила около двух минут и не была статистически значимой.

Наибольший разрыв проявился в отладке кода. Участники без ИИ чаще сталкивались с ошибками и исправляли их самостоятельно, что является важной частью обучения. Авторы исследования назвали этот эффект «never-skilling» — ситуацией, когда навык не успевает сформироваться из-за передачи ключевых этапов работы искусственному интеллекту.

Ученые также выделили риск «mis-skilling», когда специалист закрепляет неверные знания, приняв ошибочный ответ ИИ за правильный. Похожие опасения высказывают и специалисты в области медицинского образования, которые считают, что раннее использование ИИ может помешать развитию клинического мышления у врачей.

Исследование также показало, что результат зависит от способа взаимодействия с ИИ. Участники, которые задавали помощнику вопросы о принципах работы кода, показали лучшие результаты, чем те, кто полностью делегировал ему задачи.

«Пользователи помощника чаще избегали этих этапов [отладки], поскольку система сразу предлагала решения, не заставляя разбираться в причинах проблемы», — отмечают авторы исследования.

Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.