현행 중등학교 과학 교과 지필평가 문항분석
Received: Apr 15, 2006 ; Revised: May 15, 2006 ; Accepted: May 24, 2006
Published Online: Jun 30, 2006
요약
본 연구에서는 8개 중․고등학교의 과학 교과 지필평가 문항을 수정 구안된 문항분류틀을 이용하여 현행 학교 지필평가 문항의 출제 경향을 파악하고, 문항분석을 통하여 난이도, 변별도, 신뢰도를 통계적으로 분석하였으며, 학생 점수 분포 유형을 분류하였다.
출제 경향은 전체적으로 지식 영역의 문항 비율이 높으며 탐구과정 영역의 문항 비율이 상대적으로 매우 낮은 것으로 분석되었으며, 대부분의 문항이 교과서적 맥락으로 구성되어 있었다. 문항 표현은 주로 그림이나 문장을 많이 사용하는 것으로 나타났으며, 그래프나 표의 사용 비율은 상대적으로 낮은 것으로 나타났다. 문항 유형과 형식은 학교마다 매우 다르게 나타났다. 난이도는 대체로 낮아 쉬운 문항이 많은 것으로 나타났으며 변별도는 높은 것으로 분석되었다. 단답형 및 서술형 문항의 양호도가 선다형보다 높은 것으로 나타났다. 교사들이 생각하는 난이도와 학생들이 느끼는 난이도 사이에는 상당한 차이가 있었다. 8개 학교의 신뢰도는 모두 양호한 것으로 나타났으며, 학생 점수 분포 유형 분석에서는 정상분포는 없고 부적편포와 양봉분포가 주를 이루었다. 분포 유형에는 난이도, 지역적 특성 등이 영향을 준 것으로 판단된다. 학교 과학 교과 지필평가 문항의 질을 높이기 위해서는 다양한 문항 표현의 사용과 고른 탐구과정 영역이 반영되도록 하여 문항의 난이도를 현행보다 높여야 할 것이며, 선다형 문항의 제작과 배점에 좀 더 세심한 주의를 기울여야 할 것이다.
ABSTRACT
The purpose of this study is to analyze paper and pencil test items of current secondary school science. We investigated by using modified item classification framework, and yielded item difficulty(P), discrimination index(DI) and reliability(Cronbach α) by applying the classific test theory, and classified students' test score distribution type.
The findings of this study are as follows: (1) In item making trend, the proportion of knowledge domain is much higher than inquiry process domain. Most of items are composed of textual context. For the most part, items are represented by using picture or text, while graph and table is rarely used. Item type and form is various according to school. (2) In case of P and DI, the greater part of items are made easily, and DI is farly high. The proportion of satisfactory item of short answer/essay type is higher than that of multiple choice type. There is big difference between teacher and student in P perception. (3) As a whole, reliability of eight school are satisfactory. In classification of students' test score distribution type, we recognize three distribution types(positive, bimodal, and negative). We inferred that item difficulty and regional characteristics influence to distribution type.
Accordingly, to improve the quality of paper and pencil test items of current secondary school science, teachers need to use various item representation and elements of inquiry process domain impartially, and reduce the proportion of easy item. As well, teachers should be more careful in making multiple choice item and its allotment.