Anthropic: студенты делегируют Claude сложные задачи и могут упускать развитие собственных когнитивных навыков
В феврале 2025 года Anthropic
проанализировал, как и для каких бизнес-задач сотрудники компаний используют чат-бота Claude. Теперь компания изучила, как студенты вузов интегрируют genAI в свою учебу
Чтобы получить реальную картину, исследователи отказались от проведения опросов. Вместо этого с помощью платформы Clio они проанализировали 574,7 тыс. реальных диалогов студентов с Claude, которые касались учебы. Ученые анализировали 18-дневный период использования бота. Вот ключевые выводы из отчета:
🖥 Студенты технических направлений используют Claude чаще других студентов
Особенно выделяются студенты, изучающие компьютерные науки, — на них приходится 38,6% всех диалогов. В образовательной системе США студенты этого направления составляют лишь 5,4% от общего числа выпускников бакалавриата. На студентов, изучающих естественные науки и математику, приходится 15,2% диалогов (9,2% среди выпускников)
Студенты специальностей в сфере бизнеса (8,9% диалогов при 18,6% численности), здравоохранения (5,5% против 13,1%) и гуманитарных наук (6,4% против 12,5%) менее активно внедряют AI в свои учебные процессы. Наименьший интерес проявляют студенты, изучающие психологию, и будущие учителя
📊 Задачи для Claude зависят от специальности студента
В целом, 39,3% всех диалогов касались генерации и улучшения материалов, а в 33,5% диалогов студенты просили бота объяснить технические понятия и концепции и решить задания. 11% диалогов связаны с анализом и визуализацией данных, 3,2% — созданием диаграмм, 2,4% — переводом и корректурой текста
Студенты компьютерных специальностей чаще всего просили бота создавать программы на языке C++, исправить ошибки в коде на языке Python и т. п., а студенты естественно-научного и математического направлений — решить задачи по статистике, физике, химии, математическому анализу и объяснить решение и др. Студенты, изучающие бизнес, хотели разобраться с теорией бухучета, проанализировать бизнес-кейсы и т. п. Те, кто занимаются социальными и историческими науками, просили помочь с написанием текстов по международным отношениям, разобраться в теории социальных наук и др.
🤖 Студенты по-разному взаимодействуют с чат-ботом
Anthropic изучил стили взаимодействия студентов с Claude и выделил 4 основных паттерна:
▪️ Совместное создание контента. Пользователь в партнерстве с ботом постепенно улучшает текст письменной работы
▪️ Совместное решение задачи. Студент вместе с ботом постепенно ищет решение задачи
▪️ Прямое создание контента. Студент просит бота создать готовый текст, презентацию или другой материал
▪️ Прямое решение задачи. Студент просит бота дать сразу готовый ответ или решение задачи
Все изученные диалоги распределены по этим паттернам примерно равномерно — по 23—29% диалогов на каждый паттерн
🧐 Студенты иногда списывают с помощью чат-бота
Исследователи не пытались целенаправленно изучить, используют ли студенты чат-бота просто для списывания. Но 47% всех диалогов касались паттернов прямого создания контента или прямого решения задачи. Среди тревожных примеров диалогов — отметить правильные варианты ответов в учебных тестах по английскому языку и машинному обучению, переписать тексты, чтобы избежать плагиата
🧠 Студенты перекладывают когнитивные задачи и упускают развитие когнитивных навыков
В Anthropic использовали Таксономию Блума — модель когнитивных навыков, разработанную американским педагогом Бенджамином Блумом. Всего в ней 6 навыков, на верхних уровнях которой — создание и анализ. Большинство задач (70%), делегируемых чат-боту, как раз относились к этим уровням. Намного реже встречались задачи низких когнитивных уровней: применение знаний в новых ситуациях (10,9%), объяснение и перефразирование (10%), а также запоминание информации (1,8%).
Исследователи Anthropic опасаются, что студенты могут упускать возможность развивать собственные когнитивные навыки высокого уровня
clc.to/r5Prcg