43%의 교사가 믿는 도구, 절반은 틀린다
C
Contenjoo
에듀테크 오늘
수정시각
날짜
Empty
AI생성이미지
미국 중·고등학교 교사 43%가 AI 탐지 도구를 사용합니다.
그런데 이 도구들의 오판율이 15%에서 45%입니다.
비영어권 학생은 더 심합니다. 절반 가까이가 억울하게 걸릴 수 있습니다.
실제로 일어난 일들
마를리 스티븐스, 노스조지아대학교 학생.
대학이 권장한 맞춤법 검사기 Grammarly를 썼습니다. AI 부정행위로 찍혔습니다. 0점 처리. 학사 경고. 6개월간 징계 절차를 밟았습니다. 결국 장학금을 잃었습니다.
"잠도 못 자고 아무것도 집중할 수 없었어요. 무력감뿐이었습니다."
아일사 오스토비츠, 워싱턴 D.C. 17세 고등학생.
한 학년에 세 번 의심받았습니다. 두 과목에서 세 번. 세 번 다 본인이 직접 쓴 글이었습니다.
"정신적으로 지쳐요. 이건 제 머리로 생각해서 쓴 글인데."
호주 NSW 공립고등학교들.
AI 탐지 도구가 학생들의 과제를 AI 생성물로 잘못 판정했습니다. 학생들은 수업 중 선생님에게 공개적으로 질책당했습니다. 방과 후 억류까지 당했습니다.
전부 누명이었습니다.
숫자로 보면
2025년 연구에서 10,000개 이상의 에세이를 분석했습니다. 결과는 이렇습니다.
탐지 도구 | 오판율 |
ZeroGPT | 28% |
GPTZero | 22% |
Originality.ai | 18% |
OpenAI Classifier | 15% |
Turnitin (창의적 글쓰기) | 35% |
가장 많이 쓰이는 Turnitin도 창의적 글쓰기에서는 3건 중 1건 이상을 잘못 판정합니다.
더 심각한 건 영어가 모국어가 아닌 학생들입니다.
원어민 학생 오판율: 12-25%
비원어민 학생 오판율: 30-50%
문법이 정확하고 문장 구조가 깔끔할수록 AI가 쓴 것처럼 보입니다. 영어를 잘 쓰는 한국 학생일수록 AI로 의심받을 확률이 높아집니다.
유럽학술진실성네트워크(ENAI) 연구팀은 여러 탐지 도구를 테스트한 뒤 이렇게 결론 내렸습니다.
"탐지 도구들은 실패한다. 정확하지도 않고 신뢰할 수도 없다. 사람이 쓴 글을 AI가 썼다고 판정하고, AI가 쓴 글을 사람이 썼다고 판정한다. 우리가 테스트한 도구들은 학교에서 쓰면 안 된다."
누명이 남기는 것들
뉴욕에서 활동하는 교육 컨설턴트 루시 바그네로바. 10년 넘게 학생들의 학사 문제를 도와왔습니다. 2023년 11월 이후 AI 부정행위 관련 사례만 100건 넘게 맡았습니다. 그중 상당수가 거짓 양성, 즉 누명이었습니다.
"학생들이 제일 많이 하는 말이 불안하다는 거예요. 결백을 증명하는 과정 자체가 고통입니다. 본인은 안 했다고 하는데 아무도 안 믿어주니까요."
미국 대학의 징계 절차는 짧아야 몇 주, 길면 몇 달까지 갑니다. 그 기간 동안 학생은 조사를 받고, 소명 자료를 준비하고, 청문회에 출석합니다. 수업과 시험은 계속됩니다.
결과는 다양합니다. 장학금 박탈. 학점 삭제. 정학. 유학생의 경우 비자 문제로 이어지기도 합니다. 졸업한 뒤에 뒤늦게 표절 통보가 날아와서 취업에 영향을 받은 사례도 있습니다.
바그네로바는 더 근본적인 문제를 지적합니다.
"학교들은 감시 시스템에 돈을 씁니다. 탐지 도구 라이선스 비용, 관리 인력, 징계 절차 운영 비용. 그런데 정작 선생님이 학생 한 명 한 명을 알아가고 관계를 쌓을 시간에는 투자를 안 해요. 학생 수는 많고 시간은 없으니까요. 그게 진짜 문제입니다."
명문대들은 이미 손 뗐다
AI 탐지 도구의 한계를 인식한 대학들이 하나둘 사용을 중단하고 있습니다.
밴더빌트대학교는 Turnitin의 AI 탐지 기능을 껐습니다. 거짓 양성 가능성이 너무 높다는 이유였습니다.
케이프타운대학교는 2025년 10월 1일부터 Turnitin AI 점수 사용을 중단했습니다.
워털루대학교는 2025년 9월부터 AI 탐지 기능 사용을 멈췄습니다.
코넬대학교, 피츠버그대학교, 아이오와대학교는 교수들에게 AI 탐지 도구를 쓰지 말라고 권고하고 있습니다. 신뢰성이 부족해서 증거로 쓸 수 없다는 판단입니다.
이상한 점 하나
우리는 학생들에게 가르칩니다. "AI를 무조건 믿지 마라. 틀릴 수 있다. 검증해라."
그러면서 우리는 AI 탐지 도구의 결과는 그대로 믿습니다. 95%라고 뜨면 "거의 확실하네"라고 생각합니다. 학생이 아니라고 해도 "도구가 이렇게 나왔는데"라고 말합니다.
AI를 의심하라고 가르치면서, AI의 판단은 의심하지 않습니다.
바그네로바는 이렇게 말합니다.
"많은 사람들이 더 정확한 감시가 답이라고 생각해요. 더 좋은 탐지 도구가 나오면 해결될 거라고요. 저는 반대로 봅니다. 감시를 강화하는 방향으로는 답이 안 나와요."
ENAI 연구팀도 같은 결론을 냈습니다.
"AI 생성 텍스트를 잡아내는 쉬운 해결책은 존재하지 않는다. 어쩌면 존재할 수 없을지도 모른다. 탐지 전략에 집중하기보다, 평가 방식 자체를 다시 생각해야 한다. 최종 결과물만 보지 말고, 학생이 그 결과물에 도달하는 과정을 봐야 한다."
수업에서 쓰고 있다면 확인해볼 것
지금 사용 중인 AI 탐지 도구가 있다면, 몇 가지 점검이 필요합니다.
첫째, 그 도구의 오판율이 얼마인지 확인했나요? 공식 발표 수치와 독립 연구 수치가 다를 수 있습니다. Turnitin은 공식적으로 1-2% 오판율을 주장하지만, 독립 연구에서는 창의적 글쓰기에서 35%까지 나왔습니다.
둘째, 탐지 결과가 나왔을 때 학생이 이의를 제기할 수 있는 절차가 있나요? 그 절차가 학생에게 안내되어 있나요?
셋째, 탐지 결과만으로 판단하지 않고, 학생과 직접 대화하는 단계가 있나요? "이 부분 어떻게 썼어?"라고 물어보면 본인이 쓴 글인지 아닌지 대부분 알 수 있습니다.
넷째, 비영어권 학생, 영어가 모국어가 아닌 학생들에게 이 도구가 불리하게 작동할 수 있다는 점을 인지하고 있나요?
도구 자체가 나쁜 건 아닙니다. 문제는 한계를 모르고 쓰는 것입니다.
오판율이 15%에서 45%인 도구로 학생에게 부정행위 딱지를 붙이고, 장학금을 박탈하고, 학교 기록에 남기는 결정을 내립니다. 밴더빌트, 코넬, 워털루 같은 대학들이 이 도구들을 버린 데는 이유가 있습니다.
AI 탐지 도구 도입을 검토 중이거나, 이미 쓰고 있다면 한 번 생각해볼 필요가 있습니다. 이 도구 없이 학생의 학습을 평가할 방법은 정말 없는가? 제출된 결과물만 검사하는 대신, 학생이 글을 쓰는 과정을 함께 볼 수는 없는가? 초안, 수정본, 피드백 반영 과정을 보면 그 학생이 직접 썼는지 아닌지 더 정확하게 알 수 있지 않은가?
결국 선택지는 두 가지입니다. 알고리즘에 판단을 맡기거나, 학생을 직접 알아가거나.
후자가 더 어렵습니다. 시간도 더 듭니다. 하지만 그게 원래 우리가 해온 일입니다. 감시를 늘리는 건 쉽습니다. 신뢰를 쌓는 건 어렵습니다. 교육은 원래 후자를 하는 곳이었습니다.
'오늘배움' 구독하기
사이트를 구독하면 새 포스트 등 최신 업데이트를 알림과 메일로 가장 먼저 받아보실 수 있습니다.
Slashpage에 가입하고 '오늘배움'을 구독하세요!
Slashpage에 가입하고 '오늘배움'을 구독하세요!
