.jpeg)
국어과 국가수준 학업성취도 평가의 문항 개선 방안 연구 －2008∼2010년 검사지의 타당도 검토를 중심으로－
김영란 김인숙
한국교육과정평가원
Korea Business Review 44호 67-110 (2012)
초록
본 연구는 전수 대상 시행 이후의 국어과 국가수준 학업성취도 평가 검사지의 신뢰도와 타당도를 검토하고, 그 결과에 따라 검사지의 신뢰도와 타당도를 떨어뜨리는 문항의 특징을 분석하여 문항 개선점을 제시하는 것을 목적으로 한다. 이를 위하여 2008-2010년의 초, 중, 고 9개 국어과 검사 결과를 이용하여 신뢰도 계수 산출, 문항 제거 시 신뢰도, 문항 변별도, 요인분석을 통한 요인적재량을 검토하였다. 신뢰도 분석 결과, 9개 검사지의 신뢰도가 모두 높은 것으로 나타났다. 그리고 6개 검사지 중 8개 문항이 검사지의 신뢰도를 다소 떨어뜨리는 문항인 것으로 나타났다. 그리고 구인 타당도 분석 결과, 14개의 문항이 국어능력을 측정하는 것과는 거리가 있는 것으로 나타났다. 이렇게 검사지의 신뢰도를 떨어뜨리는 문항과 국어능력 측정 기능이 낮은 문항은, 공통적으로 해당 검사지의 문항들 중에서 변별도가 상대적으로 낮은 문항이라는 점을 발견하였다. 그리고 이러한 문항들은 모두 학습자가 정답을 확정하는 데 장애가 되는 요소가 있다는 특징을 추출하였다. 또한 정답 확정에 장애를 주는 원인을 네 가지 유형으로 분류할 수 있었다. 첫째, 문항에서 불충분한 정보가 제공되어서 학생들이 진위 여부를 확정하기 어려운 경우였다. 둘째, 불명확한 진술이나 혼동을 일으키는 내용이 포함되어서 학생들이 진위 여부를 확정하기 어려운 경우였다. 셋째, 학습자 수준을 상회하는 어려운 요소 때문에 학생들이 정답을 확정하기 어려운 경우였다. 넷째, 언어 양식(음성 언어)의 처리 방식에 적합지 않은 내용으로 구성되어서, 학생들이 정답을 확정하는 데 무리가 따른 문항들이었다.
키워드
국어과 국가수준 학업성취도 평가타당도신뢰도구인타당도요인분석
참고문헌
- [1] [보고서] 2010년 국가수준 학업성취도 평가 결과 분석 －국어－/김도남/한국교육과정평가원/2011/~/연구보고 RRE 2011-3-2
- [2] [보고서] CURRV 모형에 기초한 국어과 국가수준 학업성취도 평가 고찰/김영란/한국교육과정평가원/2011/~/연구보고 RRE 2011-14
- [3] [학술지(정기간행물)] 김창원/국가 수준 학업성취도 평가의 본질과 제 문제/국어교육/2011/134(134)/1~33/한국어교육학회/
- [4] [학술지(정기간행물)] 김혜정/국가 수준 학업 성취도 평가 개선을 위한 ‘읽기’ 평가의 비판적 검토/국어교육/2011/134(134)/61~86/한국어교육학회/
- [5] [학술지(정기간행물)] 남민우/초등학생들의 시적 능력과 시교육 평가의 개선 방안 －국어과 학업성취도 평가 결과를 바탕으로－/국어교육학연구/2011/37(41)/379~412/국어교육학회/
- [6] [보고서] 2008년 국가수준 학업성취도 평가 연구－국어－/남민우/한국교육과정평가원/2009/~/연구보고 RRE 2009-9-1
- [7] [학술지(정기간행물)] 남민우/국가 수준 국어과 학업성취도 평가의 시행 체제 개선 방안/국어교육/2011/134(134)/113~130/한국어교육학회/
- [8] [보고서] 2009년 국가수준 학업성취도 평가 연구－국어－/남민우/한국교육과정평가원/2010/~/연구보고 RRE 2010-6-2
- [9] [학술지(정기간행물)] 박영민/국가 수준 학업성취도 평가 개선을 위한 ‘쓰기’ 평가 이론의 정립/국어교육/2011/134(134)/87~112/한국어교육학회/
- [10] [단행본] 타당도와 신뢰도/성태제/양서원/2002/~///
- [11] [학술지(정기간행물)] 이순묵/요인분석의 관행과 문제점/한국심리학회지：산업 및 조직/1994/7(1)/1~27//
- [12] [학술지(정기간행물)] 이은희/문법 평가의 현황과 과제 - 국가 수준 학업 성취도 평가를 중심으로 -/문법 교육/2011/15(15)/1~29/한국문법교육학회/
- [13] [학술지(정기간행물)] 임칠성/국가 수준 학업성취도 평가 개선을 위한 ‘듣기’ 평가 이론의 정립/국어교육/2011/134(134)/35~60/한국어교육학회/
- [14] [보고서] 2003년 국가수준 학업성취도 평가 연구－총론－/정구향/한국교육과정평가원/2004/~/연구보고 RRE 2004-1-1
- [15] [보고서] 국가수준 학업성취도 평가의 교과별 평가 틀 개발 연구/정은영/한국교육과정평가원/2010/~/연구보고 CRE 2010-7
- [16] [학술지(정기간행물)] 조재윤/국가수준 국어과 학업성취도 평가의적합성 검토 연구：국어과 평가의 적합성 검토 VRUT 모형을 사용하여/한국초등국어교육/2011/34(46)/349~377/한국초등국어교육학회/
- [17] [학술지(정기간행물)] 주세형/국가 수준 학업 성취도 평가에서의 소위 ‘텍스트 중심 원리’에 대한 비판 －2005~2008년 문법 영역을 중심으로－/국어교육학연구/2009/48(35)/481~506/국어교육학회/
- [18] [학술지(정기간행물)] 주세형/국어과 문법 평가 이론의 발전 방향/국어교육/2011/135(135)/39~66/한국어교육학회/
- [19] [학술지(정기간행물)] 천경록/국어과 평가의 정합성 분석의 기초/국어교육/2009/129(129)/113~142/한국어교육학회/
- [20] [학술지(정기간행물)] 천경록/초6 국어과 성취도 평가의 정합성 판정/한국초등국어교육/2010/3(43)/35~61/한국초등국어교육학회/
- [21] [학술지(정기간행물)] 천경록/국가수준 국어과 평가의 정합성 분석 - 중3, 고1 학업성취도 평가를 중심으로 -/국어교육/2011/(136)/297~324/한국어교육학회/
- [22] [학술지(정기간행물)] 최지현/국가 수준 학업 성취도 평가 개선을 위한 ‘문학’ 평가 이론의 정립/국어교육/2011/135(135)/1~37/한국어교육학회/
- [23] [단행본] 독서 평가의 이해와 사용/서수현/한국문화사/2010/~///