레딩대학교 스카프(Scarfe) 교수와 그의 팀이 실시한 획기적인 연구에서 인공지능(AI)이 쓴 답안이 대학 시험에서 인간 학생이 쓴 답안보다 더 나은 결과를 보였다는 사실이 밝혀졌습니다.
연구진은 AI가 생성한 평가 답변이 인간 마커로 평가할 때 " 거의 감지할 수 없다 "는 사실을 발견했습니다. 이는 학문적 위법 행위에 대한 우려가 커지고 있으며 교육 평가에서 AI의 사용을 다룰 필요성을 강조합니다.
이 연구에는 대학 심리학 학사 학위의 일환으로 공식 "재택 시험"에 답하기 위해 ChatGPT 사용하는 33명의 가짜 학생 신원 생성이 포함되었습니다.
이러한 AI 생성 답변은 평가를 위해 실제 학생들이 작성한 답변과 함께 제출되었습니다. 이 연구를 알지 못했던 마커들은 인간보다 AI 제출물에 더 높은 점수를 부여했습니다.
실제로 AI 제출물 중 83%가 실제 학생들의 답변보다 더 나은 점수를 받았습니다. 이는 AI의 우수한 성과에 비추어 학생 성과 평가의 공정성과 정확성에 대한 중요한 질문을 제기합니다.
AI 활용에 따른 학문적 부정행위 우려
이 연구의 깨달은 결과는 AI가 교육 부문에 미치는 즉각적인 영향에 대한 대학의 우려를 불러일으켰습니다.
학생들은 현재 감지 시스템의 부적절함을 이용하여 부정 행위에 AI를 점점 더 많이 사용하고 있습니다. 교과 과정이나 에세이와 같은 평가 방법을 줄여야 한다는 요구가 있었고, 다른 사람들은 교육 관행에서 AI의 책임감 있고 윤리적인 통합을 주장했습니다.
Ucas 입학처가 실시한 설문 조사에 따르면 학생의 53%가 시험 준비를 위해 생성 AI를 사용한 것으로 나타났습니다. 그러나 현재 AI 탐지 소프트웨어는 AI가 생성한 콘텐츠를 탐지하는 데 크게 실패했으며, 부정 행위를 식별하는 책임을 인간 마커에게 맡겼습니다.
AI 탐지 소프트웨어의 부적절함
AI 탐지 소프트웨어가 생성하는 낮은 '오탐지' 비율로 인해 대학은 학생들의 부정 행위를 비난하는 것을 주저하게 됩니다. 이로 인해 인간 마커가 AI 생성 콘텐츠를 식별해야 하는 부담이 가중되는데, 이는 AI가 더욱 정교해짐에 따라 점점 더 어려워지고 있습니다.
레딩 대학교(University of Reading)가 실시한 연구는 현재 AI 프로세서가 "튜링 테스트(Turing test)"를 통과하고 있음을 보여줍니다. 이는 숙련된 심사관이 탐지하지 않고 통과할 수 있음을 의미합니다.
대학들에 AI를 윤리적으로 수용할 것을 요구
평가에서 AI가 제기하는 과제 속에서 대학은 AI를 윤리적으로 수용하기 위해 적극적인 접근 방식을 취해야 한다는 요구가 있습니다.
옥스포드, 케임브리지, 유니버시티 칼리지 런던 등 최고의 대학을 포함하는 러셀 그룹은 교육 및 평가에 AI의 윤리적 사용을 허용하겠다고 약속했습니다.
AI를 사용하여 학생들의 숙련도를 낮출 때 발생할 수 있는 위험
다양한 과제에 대한 답변을 생성하고 지원을 제공할 수 있는 AI 도구의 가용성은 학생들이 AI 지원 없이 비판적 사고, 분석 및 글쓰기에 참여하는 능력을 방해할 수 있습니다.
버밍엄 대학의 법학, 윤리, 정보학 연구원인 Karen Yeung 교수는 학교와 대학교의 시험에 AI를 사용하도록 허용하면 학생들의 기술을 '탈 기술'하는 데 자체적인 문제가 발생할 수 있다고 말했습니다.