AI 탐지기에 걸린 과제 53.6%, 튜터로 쓴 학생과 대필시킨 학생은 무엇이 달랐나

AI에게 과제를 대신 쓰게 한 대학생의 글은 AI 탐지기에 53.6%가 걸렸고, 일주일 뒤 AI 없이 쓴 에세이에서는 효과가 사라졌다. 튜터처럼 쓴 학생은 시험 효과가 남았다.

Daniel Moon2026.10.292분 읽기조회 00댓글 0

연재 · 3화AI로 공부하면 실력이 늘까목록

핵심 요약

1미국 미들버리대 실험에서 AI를 쓴 학생의 49%는 튜터형, 32%는 대필형이었다.
2AI 탐지기는 대필형 글의 53.6%, 튜터형 글의 20.9%를 AI가 쓴 글로 판정했다.
3첫날 에세이 효과는 대필형이 0.54 표준편차로 컸지만, 일주일 뒤 AI 없이 쓴 에세이에서는 0.02로 사라졌다.
4일주일 뒤 시험 효과는 튜터형 0.29 표준편차, 대필형 0.19 표준편차(통계적으로 뚜렷하지 않음)였다.
5메릴랜드대 수업용 AI 튜터에 들어온 요청의 73.8%는 정보·설명·풀이를 달라는 것이었다.

AI에게 과제를 대신 쓰게 한 대학생의 글은 AI 탐지기에 53.6%가 걸렸다. AI를 개인 튜터처럼 쓴 학생의 글은 20.9%가 걸렸다. 미국 미들버리대 연구진이 2026년 7월 IZA 토론 논문에 실은 결과다. 더 큰 차이는 탐지 결과보다 일주일 뒤 남은 실력에서 났다.

같은 AI를 두 가지로 썼다

연구진은 학부생 211명 실험에서 AI 허용 반 학생들의 대화 기록을 읽고 쓰임새를 나눴다. 개념 설명을 시킨 학생이 57%로 가장 많았다. 답안 초안을 쓰게 한 학생은 31%, 읽을거리 요약을 맡긴 학생은 17%였다.

이 기록으로 학생을 두 무리로 갈랐다. 설명만 듣고 글은 스스로 쓴 튜터형이 49%였다. AI가 답안을 대신 만들게 한 대필형은 32%였다. 나머지 학생은 두 방식을 섞어 썼다.

첫날 에세이는 대필형이 좋았다

AI를 켜 둔 첫 시간에는 대필형이 유리했다. 에세이 품질 효과가 대필형은 0.54 표준편차, 튜터형은 0.05 표준편차였다. 글을 AI가 써 줬으니 자연스러운 결과다. 연구진이 돌린 AI 탐지기 팡그램(Pangram)은 이 차이를 그대로 잡아냈다. 대필형 글의 53.6%가 AI 작성으로 판정됐다.

일주일 뒤 AI 없이 다시 쓰자 순서가 바뀌었다

약 일주일 뒤 모두 AI 없이 시험을 보고 에세이를 썼다. 대필형의 에세이 품질 효과는 0.02 표준편차로 사실상 사라졌다. 시험 점수 효과도 0.19 표준편차로 줄었고 통계적으로 뚜렷하지 않았다. 튜터형은 시험 점수 효과 0.29 표준편차를 지켰다. 이 값도 표본이 작아 정밀도는 낮지만, 연구진은 튜터형의 학습 효과가 이어졌다고 봤다.

항목	튜터형	대필형
AI 사용 학생 중 비율	49%	32%
첫 시간 에세이 품질 효과	0.05 표준편차	0.54 표준편차
AI 탐지기 판정 비율	20.9%	53.6%
일주일 뒤 시험 효과	0.29 표준편차	0.19 표준편차
일주일 뒤 에세이 품질 효과	양의 방향(정밀도 낮음)	0.02 표준편차

첫날 점수만 보면 대필이 이긴 것처럼 보인다. AI가 없는 자리에서 남는 것은 튜터형 쪽이었다.

탐지기 판정만으로는 가려내기 어렵다

튜터형 학생 글도 20.9%가 AI 작성으로 판정됐다. 튜터형은 설명을 듣고 글은 스스로 쓴 무리로 분류된 학생들이다. 이들 글에 AI 문장이 조금 섞였을 수는 있지만, 판정 비율만 보고 누가 대필했는지 가르기는 어렵다. 대필형도 절반 가까이는 탐지를 빠져나갔다. 학생 실력을 더 정확하게 드러낸 것은 일주일 뒤 AI 없이 다시 쓴 결과였다.

학교가 준 AI 튜터도 답 요청으로 채워졌다

2026년 10월 나온 미국 메릴랜드대 실험에도 같은 버릇이 기록됐다. 수업에 붙인 AI 튜터로 들어온 요청의 73.8%는 정보·설명·풀이를 달라는 것이었다. 연습과 시험 준비는 11.3%였고, 자기 답안을 봐 달라는 요청은 0.7%에 그쳤다. 이 실험에서 AI 튜터를 받은 반의 최종 성적은 오히려 낮았다. 도구 이름이 튜터여도 학생이 답만 달라고 하면 대필과 비슷하게 쓰인다.

판단

과제에 AI를 쓴다면 초안을 맡기지 말고 설명을 듣는 데까지만 쓰는 쪽이 낫다. 미들버리대 실험에서 튜터형은 일주일 뒤에도 시험 효과 0.29 표준편차가 남았고, 대필형의 에세이 효과는 0.02 표준편차로 사라졌다. AI 탐지기에 걸리는 비율도 대필형이 53.6%로 훨씬 높다.

사진: cottonbro studio, Pexels