В новаторском исследовании, проведенном профессором Скарфом и его командой в Университете Рединга, было обнаружено, что ответы, написанные искусственным интеллектом (ИИ), превосходят ответы, написанные студентами-людьми на университетских экзаменах.
Исследователи обнаружили, что оценочные ответы, сгенерированные ИИ, были « практически необнаружимы » при оценке с помощью человеческих маркеров. Это подчеркивает растущую обеспокоенность по поводу академических нарушений и необходимость решения проблемы использования ИИ в образовательных оценках.
Исследование включало создание 33 поддельных студенческих личностей, которые использовали ChatGPT для ответов на официальные «домашние экзамены» в рамках университетской степени бакалавра психологии.
Эти ответы, сгенерированные ИИ, впоследствии были представлены вместе с ответами, написанными реальными студентами, для оценки. Маркеры, не знавшие об исследовании, присвоили работам ИИ более высокие оценки, чем их человеческим коллегам.
Фактически, 83% заявок ИИ получили более высокие оценки, чем ответы реальных студентов. Это поднимает серьезные вопросы о справедливости и точности оценки успеваемости учащихся в свете превосходных результатов ИИ.
Обеспокоенность по поводу академических нарушений при использовании ИИ
Результаты исследования вызывают обеспокоенность в университетах по поводу непосредственного воздействия ИИ на сектор образования.
Студенты все чаще используют ИИ для мошенничества, пользуясь недостатками существующих систем обнаружения. Раздавались призывы сократить такие методы оценки, как курсовые работы и эссе, в то время как другие выступают за ответственную и этическую интеграцию ИИ в образовательную практику.
Опрос, проведенный приемной службой Ucas, показал, что 53% студентов использовали генеративный искусственный интеллект для подготовки к экзаменам. Однако нынешнее программное обеспечение для обнаружения ИИ в значительной степени не справляется с обнаружением контента, созданного ИИ, в результате чего ответственность за выявление мошенничества возлагается на человеческие маркеры.
Несовершенство программного обеспечения для обнаружения ИИ
Низкий уровень «ложных срабатываний», выдаваемых программным обеспечением для обнаружения ИИ, заставляет университеты нерешительно обвинять студентов в мошенничестве. Это возлагает на человеческие маркеры нагрузку по идентификации контента, созданного ИИ, что становится все труднее по мере того, как ИИ становится все более сложным.
Исследование, проведенное Университетом Рединга, показывает, что нынешние процессоры искусственного интеллекта проходят «тест Тьюринга», то есть могут пройти его незамеченными для опытных судей.
Призывает университеты этически принять ИИ
На фоне проблем, связанных с ИИ в оценках, университетам раздаются призывы занять активную позицию в этическом применении ИИ.
Группа Рассела, в которую входят ведущие университеты, такие как Оксфорд, Кембридж и Университетский колледж Лондона, обязалась разрешить этичное использование ИИ в преподавании и оценивании.
Риски потери квалификации студентов из-за использования ИИ
Доступность инструментов искусственного интеллекта, которые могут генерировать ответы и оказывать помощь в различных задачах, может препятствовать способности учащихся заниматься критическим мышлением, анализом и письмом без помощи искусственного интеллекта.
Профессор Карен Юнг, научный сотрудник по юриспруденции, этике и информатике в Университете Бирмингема, сказала, что разрешение использовать ИИ на экзаменах в школах и университетах может создать собственные проблемы в «деквалификации» студентов.