원문 제목: GenAIT: Development and Validation of an Objective Generative AI Literacy Test for High School Students
한눈에 보기
에스토니아 고등학생 7,432명을 대상으로 기술·실천·인간 영향 영역을 다루는 18문항 객관식 GenAIT를 개발·검증했다. 집단 수준 연구에 쓸 만한 신뢰도와 모형 적합도를 보였지만, 낮은 점수대 학생의 측정 정밀도는 상대적으로 낮았다. 사용 빈도와 긍정적 인식은 개념 이해의 대리변수가 아니었다.
연구 질문과 설계
고등학생의 생성형 AI 개념 지식을 객관적으로 재는 검사를 만들고, 그 검사가 집단 수준 연구와 개인 판정에 어느 정도 적합한지 검증했다. 기술·실천·인간 영향 영역을 포함한 18문항을 개발한 뒤 에스토니아 고등학생 7,432명의 응답을 분석했다.
핵심 결과
근사적 단일차원성과 집단 연구에 사용할 수 있는 수준의 신뢰도가 확인됐다. 3모수 로지스틱 모형 적합도도 양호했다. 그러나 낮은 능력 구간의 측정 정밀도는 낮았고, 사용 빈도와 긍정적 인식은 검사 점수의 대리변수가 되지 못했다.
교육 현장에 주는 의미
AI 수업의 성과를 로그인 횟수나 자기효능감만으로 판단하지 말고, 기술 원리·한계·사회적 영향을 묻는 별도 개념 평가를 병행할 필요가 있다. 개인 선발보다 학급·학교 수준의 진단과 교육과정 개선에 우선 활용하는 편이 타당하다.
한계와 읽기 주의
에스토니아어 검사와 한 국가의 표본이므로 다른 언어·교육과정에 바로 일반화할 수 없다. 낮은 점수대 학생의 정밀도가 낮아 고위험 개인 판정에는 추가 검증이 필요하다.
인용 맥락 메모
AI 활용 빈도와 AI 개념 이해를 별도 지표로 측정해야 한다는 주장의 대규모 실증 근거로 쓸 수 있다.
APA 7판
Puppart, B., Laak, K.-J., & Aru, J. (2026). GenAIT: Development and validation of an objective generative AI literacy test for high school students [Preprint]. arXiv. https://arxiv.org/abs/2608.25815