수학 문제 AI에 물어볼 때, 어떤 순서여야 실력이 늘까

수학 문제를 AI에 물을 때 실력이 느는 순서는 먼저 혼자 풀고, 틀린 곳에서 자기 풀이를 보여 주며 묻고, AI가 되물으면 이유까지 답하는 것이다. 2026년 나온 실험 두 개가 이 순서를 받친다. 구글 딥마인드의 시에라리온 실험에서 제미나이가 답을 바로 준 메시지는 2%였고, 수학 성적은 0.258 표준편차 올랐다. 미국 칸미고 실험에서는 학생이 틀린 문제 앞에서 AI에게 물은 비율이 17%에 그쳤다.

답을 주지 않는 AI가 성적을 올렸다

구글 딥마인드는 2026년 6월 시에라리온 중학생 1,763명이 8주 동안 제미나이 가이드 학습으로 수학을 공부한 결과를 공개했다. 제미나이 메시지의 76%는 학생의 생각을 받쳐 주는 질문이었고, 답을 바로 준 경우는 2%였다. 학생 대화의 91.4%는 개념을 이해하는 데 쓰였다. 대조군과 비교한 수학 성적은 0.258 표준편차 높았다.

학생의 질문도 바뀌었다. 실력을 쌓는 질문은 첫 주 68%에서 마지막 주 90%로 늘었다. 답을 찾는 질문은 25%에서 10%로 줄었다. 처음에는 답을 달라던 학생도 AI가 답을 내주지 않자 묻는 방식을 바꿨다는 뜻이다.

묻지 않으면 같은 AI도 소용이 없다

미국 테네시 중학교의 칸미고도 답을 주지 않고 질문으로 이끄는 AI다. 2026년 8월 미국 전미경제연구소(NBER) 워킹페이퍼로 나온 실험에서, 학생이 틀린 문제가 든 풀이 묶음에서 메시지를 보낸 비율은 중앙값 학생 기준 17%였다. 보낸 메시지의 39.4%는 숫자나 짧은 말만 있는 답이었고, 수학 질문이나 풀이 단계를 담은 메시지는 14.5%였다.

물었을 때의 대화는 짧지 않았다. 메시지가 있던 틀린 문제 묶음에서 학생은 중앙값 3개, 평균 6.5개의 메시지를 주고받았다. 연구진은 대화가 얕았다기보다 드물었다고 표현했다. 칸미고 학년의 수학 성적은 1년에 0.06~0.08 표준편차 올랐고, 연구진은 이를 AI 없이 연습한 경우와 비슷한 수준으로 봤다.