지난 몇 년간 기술 역량이 크게 향상되면서 모든 학생의 요구에 맞춘 맞춤형 교육 제품과 서비스가 가능해졌습니다. 평가도 예외는 아니며, 교육 평가 설계와 구현의 일반적인 관행을 혁신할 잠재력을 가진 혁신이 다가오고 있습니다. 개인 맞춤형 평가는 우리가 중요하게 여기는 기술을 보다 정확하게 측정하고 모든 학습자에게 공정성을 높일 수 있는 큰 잠재력을 가지고 있습니다. 하지만 평가 설계에 개인화를 도입하는 것은 특정한 도전 과제를 낳으며, ETS의 일부 연구는 이를 해결하는 데 집중하고 있습니다.
체계적인 연구 의제를 따라, 우리는
- 언어, 관심사, 사전 지식, 문화적 배경 등 평가를 개인화하는 데 사용할 수 있는 개인별 요소들을 조사하는 것,
- 개인 맞춤형 평가가 학습과 개인 성장을 어떻게 지원할 수 있는지 탐구합니다.
- 개인 맞춤형 평가 결과를 비교하는 선구적인 측정 방법,
- 테스트가 언제 개인화가 적절한지, 어떻게 구현할지 결정할 수 있도록 돕는 이론 구축, 그리고
- 개인화가 학생 성과에 미치는 영향에 대한 증거 수집.
우리의 목표는 다음과 같은 질문에 답하는 것입니다: 맞춤형 평가가 모든 학습자에게 정말로 긍정적인 영향을 미칠 수 있을까요?
연구와 기술 혁신을 통해 모든 응시자에게 평가를 더 공정하고 효과적으로 만드는 것을 목표로 합니다.
- 개인화가 평가에 어떻게 그리고 어느 정도까지 적용될 수 있는지는 무한한 조합이 존재합니다. 우리의 연구는 학습자, 교사, 교육 정책 입안자들이 다양한 상황에서 개인화의 이점을 극대화하는 데 중요한 지침을 제공하고 있습니다.
- 개인화를 시험 응시 자가 평가에 가져오는 개인적 자질(예: 배경 지식, 관심사, 이전 경험)에 기반함으로써, 우리는 시험 불안을 줄이고 동기를 높이며 응시자들이 실제로 무엇을 할 수 있는지 보다 정확하게 파악할 방법을 찾고 있습니다.
- 우리는 이제 기술이 학습자들이 평가 중 받는 지원을 개인화할 수 있게 해준다는 점을 시연하고 있습니다. 적절한 기반을 제공하면 학습자가 과목에 더 잘 참여하고 교사에게 더 나은 정보를 제공하여 수업에 도움이 될 수 있습니다. 예를 들어, 영어 학습자가 스스로 영어 평가를 완료할 수 없는 학생들에게 언어 지원을 제공하는 것입니다.
- 개인 맞춤형 평가는 점수와 보고서를 최대한 유용하고 이해하기 쉽게 만들기 위한 새로운 접근법을 요구합니다. 우리는 다양한 평가 경험에서의 성과 비교를 위한 혁신적인 방법을 선도 하고, 결과를 제시하는 방식을 최적화하여 수업에 정보를 제공하고 학습을 강화하는 연구를 선도하고 있습니다.
- 우리는 교사와 학생들과 직접 협력하여 혁신적인 시험 설계를 진행하며, 교육 시스템에서 가장 중요한 사람들인 학생과 교사의 요구를 충족시키기 위해 맞춤형 평가가 어떻게 작동해야 하는지 이해하고 공유하고 있습니다.
- 엄격하고 체계적인 연구 프로그램을 통해 맞춤형 평가의 모범 사례를 더 잘 이해하고 증거를 공유하여 교육 시스템 전체에 혜택을 줄 것입니다.
우리 팀의 맞춤형 평가 분야의 최첨단 연구에 대해 더 알고 싶다면, 2025년 미국 교육연구협회(AERA)와 국가교육측정위원회(NCME) 컨퍼런스에 참여하거나 이 공간과 연구자들의 LinkedIn 프로필을 팔로우해 주세요.
AERA 및 NCME 발표 세션
4월 23일 수요일
AI 시대의 베이지안 네트워크의 응용. 교육 세션. (오전 8시, 힐튼 덴버 시티 센터, 덴버 볼룸 4)
인터랙티브 대시보드 보고서 설계 및 평가를 위한 도구 및 전략. 교육 세션. (오후 1시, 힐튼 덴버 시티 센터, 콜로라도 볼룸 CD)
4월 24일 목요일
생성형 AI를 통한 수학 단어 문제의 실시간 맥락 개인화 (Context-AI). 세션 중 혁신 시연 세션 1. (오전 9:45, 힐튼 덴버 시티 센터, 콜로라도 볼룸 GH)
표준화된 입학 시험은 공정한가요? 그렇지 않다면, 어떻게 하면 더 공정하게 만들 수 있을까요? 조직적인 토론. (오전 9시 45분, 힐튼 덴버 시티 센터, 매티 실크스 룸)
형성 평가 및 교육 측정. 교 실 평가의 본질과 엄격성에 관한 세션 중. (오전 11시 30분, 힐튼 덴버 시티 센터, 덴버 볼룸 1-2)
다조항 항목 검사에 대한 하위 점수의 부가가치. 세션 점수 보고. (오후 3:15, 힐튼 덴버 시티 센터, 덴버 볼룸 3)
학습 진행 과정을 통한 AI-수학 대화 강화. 세션 내 생성 형 AI의 수학 교육에 적용: 기회와 도전. (오후 3:15, 힐튼 덴버 시티 센터, 펜로즈 볼룸 2)
학생 해결 경로와 LLM을 활용해 수학 학습을 향상시키는 탐구. 세션 내 생성 형 AI의 수학 교육에 적용: 기회와 도전. (오후 3:15, 힐튼 덴버 시티 센터, 펜로즈 볼룸 2)
4월 25일 금요일
원본 및 변형된 NAEP 문항을 포함한 문화적으로 반응하는 평가 결과. 세션 내용, 문항 및 시험 개발. (오전 9:45, 힐튼 덴버 시티 센터, 덴버 볼룸, 5-6시).
NAEP 수학에서 노력, 동기, 성과 간의 관계. 대규모 설문조사 기반 평가에서 학생 행동 검토 세션 내. (오후 3:15, 힐튼 덴버 시티 센터, 덴버 볼룸 5-6)
학년 간 참여, 저위험 규모 수학 평가. 세션 내 시험 응시(불)참여 이해: 저위험 평가에서의 예측 변수, 시험 설계 및 안구 운동. (오후 4시 30분, 힐튼 덴버 시티 센터, 덴버 볼룸 5-6시)
4월 26일 토요일
학생 참여의 마이크로모델: 학습자 모델링에 대한 하향식식 접근법. 세션 주제: 디지털 도구가 문해력, 학습 참여, 학생 개발에 미치는 영향 (오전 8:00, 콜로라도 컨벤션 센터, 블루버드 볼룸 3D)
자동화된 문항 개발 워크플로우를 위한 수학 문항 난이도 예측. 세션 내 대규모 평가를 위한 대규모 언어 모델 활용: 기회와 도전. (오전 9:45, 힐튼 덴버 시티 센터, 덴버 볼룸 1-2)
사회문화적으로 반응하는 평가 및 측정: 이론, 측정, 시스템 수준 정책에 대한 시사점. (오전 11시 30분, 힐튼 덴버 시티 센터, 콜로라도 볼룸 CD)
성공 예측: 교사 면허 평가에서 재응시 행동의 공동 모델링. 세션 내 면허 및 인증. (오후 3:15, 힐튼 덴버 시티 센터, 콜로라도 볼룸 AB)
기억된 성공 경험이 수학 영역에서 아이들의 비용 인식에 미치는 영향. 세션 중 인 지된 비용 개념을 활용해 학생 학습의 인지 이론과 동기 이론을 잇는 다리. (오후 3시 20분, 콜로라도 컨벤션 센터, 블루버드 볼룸 3C실)
지속성과 학업 회복력 측정: 체계적 검토와 운영 정의. 세션 진행 STEM 학습 및 교육 심리학 (오후 5시 10분, 콜로라도 컨벤션 센터, 전시실 F)
4월 27일 일요일
다국어 학습자의 요구에 대응하기 위한 맞춤형 평가 활용: 교사 통찰. 교사의 관점을 반영한 AI 기반 맞춤형 교육 도구 설계 세션 (오전 8:00, 콜로라도 컨벤션 센터, 103호실)
수학 평가에서 생성형 AI를 이용한 실시간 맥락 개인화: 교사와의 공동 설계. 교사의 관점을 반영한 AI 기반 맞춤형 교육 도구 설계 세션 (오전 8:00, 콜로라도 컨벤션 센터, 103호실)
디지털 맞춤형 평가에서 교사의 역할. 교사의 관점을 반영한 AI 기반 맞춤형 교육 도구 설계 세션 (오전 8:00, 콜로라도 컨벤션 센터, 103호실)
교사와 함께하는 AI 강화 인터랙티브 리포트 설계 및 평가. 세션 내 교사 관점을 반영한 AI 기반 맞춤형 교육 도구 설계 (오전 8:00, 콜로라도 컨벤션 센터, 103호실)
다국어 학습자를 위한 영어 언어 예술 평가 강화: 공동 설계 접근법. 세션 내 다 국어 학습자를 위한 교육 형평성 증진: 지역사회 프로그램부터 형성적 글쓰기 평가까지 (오후 1시 30분, 콜로라도 컨벤션 센터, 포시즌스 볼룸 1)