AI 수학 튜터가 옆에 있어도, 틀린 문제에서 묻는 학생은 왜 17%뿐일까

미국 테네시 중학생에게 AI 수학 튜터 칸미고(Khanmigo)를 2년 동안 붙여 줬더니, 문제를 틀린 순간 AI에게 말을 건 비율은 중앙값 학생 기준 17%였다. 토론토대 필립 오리오풀로스 교수 연구진이 2026년 8월 미국 전미경제연구소(NBER) 워킹페이퍼로 낸 결과다. 수학 점수는 올랐다. 연구진은 그 효과가 AI와 나눈 대화보다 늘어난 연습량에서 나왔을 가능성이 크다고 봤다.

보충 수업 시간에 들어간 AI 튜터

실험은 테네시주 해밀턴 카운티의 중학교 18곳에서 했다. 학교마다 학년을 무작위로 골라, 기초 수학 보충 시간에 칸아카데미와 칸미고를 쓰게 했다. 보충 시간은 하루 25~40분짜리 소그룹 수업이다. 칸미고는 답을 알려 주지 않고 질문으로 이끌도록 설정돼 있었고, 문제 화면에서 클릭 한 번이면 열렸다.

선택해서 쓰는 앱과는 조건이 달랐다. 의무 수업 시간 안에 들어 있었고, 교사가 옆에 있었고, 학생은 돈을 내지 않았다. 보통 교육 앱이 겪는 '깔아만 두고 안 쓰는' 문제를 연구 설계에서 미리 줄여 둔 실험이다.

점수는 올랐고, 연습만 한 경우와 비슷했다

칸미고를 쓴 학년은 학기마다 전국 백분위가 1.3 올랐다. 1년으로 보면 0.06~0.08 표준편차다. 2년째에 1년 내내 꾸준히 참여한 학생으로 환산하면 0.14 표준편차까지 올라간다. 칸미고 학생은 일주일에 약 30분을 더 연습했다.

연구진은 이 효과가 AI 없이 칸아카데미로 연습한 학생에게 기대되는 수준과 비슷하다고 적었다. 점수 자료만 보면 AI 튜터가 있어야만 설명되는 부분이 없다는 뜻이다. 튜터가 쓰인 순간에 도움이 됐을 가능성까지 연구진이 배제하지는 않았다.