학교와 교육청이 AI 도구 도입을 판단할 때 가장 자주 막히는 지점은 "효과가 있다더라"와 "우리 학교에서도 그럴까" 사이의 거리다. 아래 넷은 그 거리를 좁히는 데 쓸 수 있는, 원문을 직접 대조해 검증한 근거다 — 국제적으로 가장 엄격한 축의 무작위 통제 실험 하나, 전국 규모 국내 조사 하나, 국내 학술 분석 하나, 그리고 국가 법정 통계 하나다. 각 항목에는 인용 시 반드시 함께 말해야 할 한계도 붙였다.
1. 효과는 있고, 작고, 취약계층에서 더 크다 — 적응형 수학 튜터 63개교 무작위 통제 실험(EEF)
설계는 학교 단위 무작위 배정 인터리브드 방식이다 — 한 학교 안에서 2·4학년군과 3·5학년군이 서로의 대조군이 되도록 배정해 1년간 운영하고, 주 결과변수는 표준화 수학 검사였으며 평가는 독립기관 NFER이 맡았다. EEF의 자물쇠 4개는 표본·설계·탈락률 등을 종합한 신뢰등급으로, 이 등급을 받는 평가는 약 10%에 불과하다.
결과의 크기를 정확히 읽는 것이 중요하다. 전체 효과는 1개월분·효과크기 0.08로 작다. 반면 무상급식 대상 학생은 2개월분·0.14로 더 컸는데, EEF는 이 하위집단 결과가 표본이 작아 전체 결과보다 신뢰도가 낮을 수 있다고 함께 밝힌다. 또한 EEF는 이 프로그램이 생성형 AI 튜터가 아니라 적응형 기술임을 명시한다 — 챗봇류 도구의 효과 근거로 옮겨 쓸 수 없다는 뜻이다.
독립기관 평가 보고서 — 프로젝트 페이지 축자 확인. ⚠️ 적응형 튜터이지 생성형 AI 튜터가 아니다(EEF 명시). FSM 하위집단 결과는 표본이 작아 신뢰도가 낮을 수 있으며, 영국 초등 수학·효능성 단계 결과다.
Education Endowment Foundation. (2026). Maths-Whizz: Evaluation report (Evaluated by NFER). https://educationendowmentfoundation.org.uk/projects-and-evaluation/projects/maths-whizz-23-24-trial
2. 전국 4만 명이 푼 수행형 검사 — 가장 약한 곳은 '디지털 자원 생산'이었다
가장 실무적인 발견은 취약 영역의 위치다. 검색과 도구 사용은 비교적 안정적인데, 학생이 직접 무언가를 만들어 내는 '디지털 자원 생산'에서 성취가 낮았다. 초등은 이 영역 전반에서 낮았고, 중학교는 그중에서도 알고리즘 저작형 문항에서만 상대적으로 낮았다.
로그 데이터 분석도 평가 설계에 시사점을 준다. 선다형 문항은 응답이 안정적이었던 반면 기능형·저작형·알고리즘형 문항에서는 로그 발생량과 체류 시간이 크게 늘었고, 검사 후반부로 갈수록 무응답과 건너뛰기가 증가했으며 조작 미완료로 인한 오답도 다수 확인됐다. 저자들은 로그로 '시도하지 않은 경우'와 '시도했으나 해결하지 못한 경우'를 구분할 가능성을 확인했다고 보고한다.
국가기관 연구보고 — 원문 PDF 축자 확인(발행 2026-01-10). 공동저자 전체 명단은 원문 확인 필요[확인 필요]. 횡단 조사라 인과 추론 불가하며, 100점 환산 점수는 절대 성취기준이 아니라 분포 기술이다. AI 리터러시는 초기적 대응 수준이라 AI 역량 측정치로 인용하면 안 된다.
김한성, 외. (2026). 2025년 학생 디지털 리터러시 수준 측정 연구 (연구보고 KR 2026-01). 한국교육학술정보원. https://www.keris.or.kr/main/ad/pblcte/selectPblcteRRInfo.do?mi=1138&pblcteSeq=13955
3. 교사 대시보드가 공통으로 보여 주는 건 '과제 제출현황' 하나뿐이었다 — AI 디지털 교육자료 7종 분석
저자들의 결론은 대시보드가 학습현황 전달 중심의 기술적 분석에 집중되어 있고, 교수적 판단과 개입으로 연결되는 처방적 분석 지원은 미흡하다는 것이다. 숫자로 현황은 보여 주지만 '그래서 무엇을 해야 하는가'는 여전히 교사의 몫으로 남는다는 뜻이다.
발행사 간 편차(25개 vs 9개)와 공통 요소가 단 하나라는 사실은 도입 심의에 직접 쓰인다. 같은 'AI 디지털 교육자료'라는 이름 아래 교사가 볼 수 있는 정보의 양과 종류가 세 배 가까이 차이 난다는 뜻이기 때문이다.
KCI 등재 논문 — 서지·초록 축자 확인(본문 전문은 유료 구간이라 미열람). 학생 성과가 아니라 대시보드 '화면에 제시된 정보 항목'을 분석한 산출물 분석이며, 초등 수학 7종 한정이라 중등·타 교과 일반화는 불가.
유미나, 진성희, 김민지, 여승현. (2026). AI 디지털 교육자료 교사 대시보드 학습데이터 분석. 교육공학연구, 42(2), 395–433.
4. 진로교육 현황조사 10년 — '희망직업 없음'이 늘어난 것을 어떻게 읽을 것인가
교육부와 한국교육개발원이 7월 26일 발간한 「데이터로 읽는 우리 교육」 2026년 제10호는 「진로교육법」 제6조에 근거한 법정 조사이자 국가승인통계(제112016호)인 '초·중등 진로교육 현황조사'의 10여 년치를 정리했다(2025년 기준 1,200개교·학생·학부모·교원 37,400여 명·280여 문항). 가장 눈에 띄는 변화는 '희망직업이 있다'는 응답의 감소다 — 초등학생은 2015년 91.3%에서 2025년 78.1%로 13.2%p, 중학생은 73.0%에서 59.9%로 13.1%p, 고등학생은 81.7%에서 71.3%로 10.4%p 낮아졌다. 발간처는 이를 진로교육의 중심이 '직업의 조기 결정'에서 '진로 탐색과 설계 역량의 함양'으로 확대되는 변화로 해석한다.
진로 이후 경로에 대한 응답도 달라졌다. 고등학생의 '대학 진학' 희망 비율은 2015년 72.5%에서 2023년 77.3%까지 70%대를 유지하다가 2024년 66.5%, 2025년 64.9%로 최근 2년 사이 뚜렷하게 낮아졌다. 같은 기간 '취업' 계획은 2023년 7.0%에서 2025년 15.6%로 두 배 이상 늘었고 '창업'은 2015년 1.0%에서 2025년 3.3%로 확대돼, 취업·창업을 합한 비율이 14.3%에서 18.9%가 됐다. 2025년 희망직업 상위 3위는 초등학생 운동선수·의사·크리에이터, 중학생 교사·운동선수·의사, 고등학생 교사·간호사·생명과학자였으며 '생명과학자 및 연구원'은 2024년 7위에서 2025년 3위로 올랐다.
진로체험은 코로나19 이전 수준을 회복했다. 2025년 참여율은 중학생 82.7%, 고등학생 76.0%로 고등학생은 2021년 57.4%에서 18.6%p 높아졌고, 만족도도 고등학생 3.75점(2021년 3.58점)·중학생 3.73점으로 반등했다. 도움 정도가 가장 높은 유형은 현장직업체험형(중 3.98점·고 4.08점)이었고, 학과체험형 참여율이 47.3%로 6개 유형 중 두 번째로 높았다 — 발간처는 이를 고교학점제 시행으로 학생이 진로에 맞춰 과목을 선택하면서 진로체험이 그 선택을 뒷받침하는 정보원이 되기 시작한 신호로 읽는다. 다만 이 조사는 동일 학생을 추적하는 패널이 아니라 매년 새 표본을 뽑는 반복 횡단면 조사여서 개별 학생의 종단적 변화나 인과관계는 확인할 수 없다는 점을 원문이 명시한다.