표 3 서·논술형 평가 도구 개발을 평가 지침

서·논술형 평가 도구 개발 : 서·논술형 문항과 채점기준 개발 및 채점 방식을 선택하는 단계
문항 (과제) 개발 • 수업에서 다룬 교육과정의 범위 안에서 종합적 사고력을 측정할 수 있는 문항을 출제하도록 하되 타당하고 신뢰로운 평가도구를 개발하고 공정한 평가가 되도록 교과(학년) 협의회에서 평가도구 개발 관련 활동의 제반 사항에 대해 충분히 논의하고 협의한다.• 정해진 학습 목표나 성취기준에 적합한 평가 방법으로 서술형과 논술형 문항 중에서 각 유형과 세부유형의 특징을 고려하여 선택한다.• 성취기준, 평가기준(성취수준)을 근거로 종합적 사고력을 측정할 수 있도록 서·논술형 문항(과제)을 개발한다. 단원 학습에 적합한 성취기준에 따라 지식, 기능, 태도 등으로 분석하고 평가요소를 추출한다. 또한 지식, 기능, 태도가 더 잘 드러날 수 있도록 평가 상황을 설정한다.• 다음의 사항에 유의하여 서·논술형 문항(과제)을 기술하고 개발한다. ① 정해진 학습 목표나 성취기준에 있는 지식, 기능, 태도와 이를 복합하는 능력을 평가할 수 있도록 서·논술형 문항(과제)을 개발한다. 학생들이 이러한 능력이나 기능을 활용해서 응답을 할 수 있도록 문항을 기술한다. ② 학생들이 문항에서 요구하는 것을 명확하게 알 수 있도록 문항의 문두(prompt)를 기술한다. ③ 학생들의 문항 당 응답 시간을 정하고 평가 시에 이를 학생들에게 안내한다. ④ 학생들이 답한 문항을 선택할 수 있도록 하는 것은 지양한다.• 학습 목표에 따른 성취기준을 평가할 수 있는 문항으로 적절하게 개발되었는지 검토한다. 개발된 문항은 다음을 중점적으로 검토하여 수정·보완한다. ① 수업에서 전개된 교수학습 활동과 문항이나 과제가 충분히 연계 되었는가? ② 이 문항에서 의도한 것을 학생들이 수행할 수 있을 것으로 기대하는가? ③ 내용 지식의 습득 여부나 정도만을 측정하는 것은 아닌가? ④ 문항은 논리적, 창의적, 비판적 사고력, 문제해결력이나 다양한 지식과 사고 능력을 복합적이고 종합적으로 활용하는 능력을 다루고 있는가?
채점 기준 개발 • 채점기준표를 작성하기 전에 분석적, 또는 총체적으로 채점 할지의 채점 방식을 선택하고 그에 따라 채점기준표를 작성한다. 또한 문항이나 과제에 대하여 일반적인 채점기준이나 구체적인 채점기준을 활용할 수 있다. 과제의 특성, 교수학습에서의 활용도, 채점의 객관성 확보 등을 고려하여 총체적 또는 분석적 채점기준표와, 구체적 또는 일반적 채점기준표에서 유형을 선정한다. 평가 결과의 피드백과 채점의 객관성 확보를 위해서 분석 채점 방식을 권장한다.• 채점기준표는 문항에서 측정하려는 평가요소와 요소별 수준(범주, 척도), 각 수준에 대한 기대 수행이 제시된 진술문으로 구성하며 서술형 문항과 논술형 문항 모두 적용한다. 평가요소가 지식, 기능, 태도로 구성되어 있을 때 채점기준표를 3개의 차원(요소)으로 구성할 수 있고 ‘지식+기능’ 차원과 ‘태도’의 2개 차원으로 구성할 수도 있다. 또한 여러 개의 기능을 측정하는 문항은 기능별로 차원을 두고 종합적 사고력을 측정하는 문항은 각 기능을 종합하는 사고능력을 별도의 차원으로 구성할 수도 있다. 이를테면 문제해결력을 측정하고자 할 때 문제인식, 전략 수립, 해결 방안 제시, 평가를 독립적인 차원으로 둘 수도 있고 문제해결력 전체를 하나의 차원으로 둘 수도 있다.• 채점기준표의 수준과 진술은 학생들의 수행이나 풀이과정의 수준을 변별할 수 있도록 구체적으로 기술한다.• 다음의 절차에 따라 채점기준표를 제작한다. ① 성취기준, 평가요소,와 문항을 검토하고 학생들이 지식이나 기술을 활용하여 문제를 풀이하는 과정이나 응답을 구체적으로 구상하고 예측해 본다. ② 추출된 평가요소를 확인하고 과제 특성, 학생 수준 등을 고려하여 각 요소를 기술하고 어떤 수준으로 구분되어 질 수 있는지 차별적 특성을 파악한다. ③ 채점기준표 유형을 선정하고 모범답안, 유사답안, 답안의 인정 범위 등을 고려하여 채점기준표를 작성한다. ④ 평가요소를 유목화하고 수준을 결정한다. 유사한 평가요소는 통합하여 대표적이며 필수적인 요소들로 선정하고 학생들이 이해할 수 있는 용어로 명명한다. 평가요소별로 수준을 구분하되 그 차이가 명확히 구분되도록 하며 3∼6개의 수준 수를 권장한다. ⑤ 각 수준의 기대수행 진술문을 작성한다. 평가요소별 각 수준에서 학습자가 최대로 수행하는 기대 수행을 구체적이고 실질적으로 기술한다. 기대수행의 진술이 수준별로 적절하고 수준 간 차이가 타당해야 채점이 용이해진다. 기대수행의 차이가 드러나지 않는다면 수준을 합하여 수준의 수를 줄일 수도 있고 구분하는 경우가 많아지면 수준을 늘릴 수도 있다.• 채점기준표를 개발하고 예시답안이나 유사답안 등을 작성할 때는 교과협의회를 충분히 거쳐 세밀하게 검토하고 수정·보완한다. 예시 답안 이외의 다른 답안의 가능성을 확인하고 채점기준의 평가요소, 수준, 기대수행이 적절하게 구성되었는지 점검한다.
교사 협의 및 공지 • 성적 산출을 같이하는 교사가 2명 이상인 경우에는 충분한 협의를 거쳐 교사간의 수업 내용이 연계되도록 하며 출제, 문항 내용 검토, 문항 편집의 일련의 과정이 공동으로 이루어질 수 있도록 한다. 이러한 검토와 수정·보완 과정은 이 후 채점기준표를 제작할 때 피드백을 제공할 수 있다.• 문항(과제)과 채점기준이 확정된 다음에는 문항(과제)에서 평가하고자 하는 평가요소와 채점기준표를 학생과 학부모에게 공지하여 학생 스스로 수업과 연계하여 서·논술형 평가에서 수행해야 할 내용과 표현해야 할 능력을 미리 알 수 있다. 채점기준표의 기대수행에 대한 진술은 수정할 수 있다.
출처: 박혜영 외(2019)에서 재구성