서술형평가 (Constructed-Response Assessment)
쉽게 풀면
예를 들어 정답 보기 중 하나를 고르는 것이 아니라 '이 현상이 나타나는 이유를 서술하시오'처럼 학생이 직접 답을 만들어 작성하게 하는 문항 형식이다. 이미 제시된 선택지 중에서 고르는 것이 아니라 학생 스스로 답을 구성해 낸다는 점이 핵심이다.
왜 중요한가
평가문항 유형 연구에서 고차적 사고력 측정에 적합한 문항 형식으로 다뤄지며, 서술형·논술형 평가 확대 정책이나 문항 개발 지침 연구에서 자주 인용된다. 구성형 응답 문항은 정답을 스스로 산출하게 함으로써 학습자의 오개념이나 사고 과정의 오류를 채점 과정에서 직접 드러낼 수 있어, 형성평가 목적의 진단 도구로도 활용 가치가 크다는 점이 함께 논의된다.
핵심 정리
- 구성형 응답(constructed response)은 응답자가 선택지에서 고르지 않고 답을 직접 만들어 내는 문항 형식입니다. 대비되는 형식은 선택형 응답(selected response)입니다.
- 답의 자유도에 따라 단답형·완성형(정답이 정해진 형식)과 서술형, 논술형(자유도가 높은 형식)으로 나누며, 수행평가의 과제 수행도 넓은 의미의 구성형 응답으로 다룹니다.
- 채점에서는 정답 기준만으로 채점하기 어려워 채점 기준표(루브릭)를 씁니다. 전체 인상으로 점수를 주는 총체적 채점과 영역별로 나누어 점수를 주는 분석적 채점이 흔합니다.
- 선택형은 채점이 객관적이고 빠르며 문항 수를 늘리기 쉬운 반면, 구성형은 사고 과정과 표현 능력을 드러내기 쉬운 반면 채점 시간과 채점자 일관성이 과제입니다.
예시로 보기
같은 학습 목표를 두 형식으로 물을 수 있습니다. 선택형은 “다음 중 이 현상의 원인으로 가장 알맞은 것은?”이고 구성형은 “이 현상이 나타나는 이유를 서술하시오”입니다. 앞의 것은 정답을 알아보는 능력을, 뒤의 것은 지식을 조직하여 설명하는 능력을 더 직접 드러냅니다. 다만 같은 능력을 재는지는 별도의 검증이 필요합니다. 베넷과 워드(Bennett & Ward, 1993)의 편저는 이 구성과 선택의 문제를 인지 측정의 쟁점으로 다룹니다. 루케레 등(Lukhele, Thissen, & Wainer, 1994)은 두 대규모 성취 시험의 자료를 분석해, 선택형과 구성형이 대체로 비슷한 능력을 재는 것으로 보였고 시간당 정보량은 선택형이 더 컸다고 보고했습니다. 시험의 목적과 과목에 따라 결론이 달라질 수 있습니다.
논문에서 구성형 평가를 쓸 때는 채점의 질이 곧 측정의 질입니다. 채점자 간 일치도를 보고하고, 채점 기준을 사전에 공유하며, 채점자 훈련과 예시 답안(앵커)을 갖추는 것이 권고됩니다.
자주 하는 오해
| 오해 | 바로잡기 |
|---|---|
| 서술형은 선택형보다 항상 타당한 평가다. | 고차 사고를 잴 수 있는 장점이 있지만, 채점 일관성 문제로 신뢰도가 낮아질 수 있어 둘의 결과를 함께 검토합니다. |
| 서술형과 논술형은 같은 말이다. | 한국 교육 현장에서는 서술형을 짧은 답안부터 풀이 과정까지 넓게, 논술형을 자기 관점을 논리적으로 전개하는 더 자유도 높은 형식으로 구분해 부르는 경우가 많습니다. 논술형평가는 이 하위 유형입니다. |
| 구성형은 추측으로 맞힐 수 없으니 신뢰도가 높다. | 추측 정답은 줄지만 채점자 편향과 채점 기준 불일치가 신뢰도를 낮춥니다. |
| 채점 기준표는 있으면 좋은 정도다. | 구성형 평가에서는 채점 기준표와 채점자 훈련이 신뢰도의 핵심입니다. 루브릭을 참고합니다. |
논문에서는 이렇게 쓰입니다
실제 논문에서
이 용어를 직접 쓴 국내 논문 문장을 아직 수집하지 못했습니다. 수집되는 대로 출처와 함께 싣겠습니다.
예시 문장
아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.
선택형 평가의 한계를 보완하는 고차원적 사고력 평가 방안으로 국가수준학업성취도평가 개편 논의에서 다루어진다.
정답을 스스로 생성해야 한다는 점에서 지식의 조직·표현 능력까지 평가한다는 구성형 응답 문항의 특징을 설명하는 문장이다.
조금 더 깊게 보면
구성형 응답 문항은 단답형, 완성형, 서술형, 논술형 등으로 세분화되며, 선택형 문항에 비해 추측으로 정답을 맞힐 가능성이 낮고 사고 과정을 드러낼 수 있다는 장점이 있는 반면, 채점 기준 설정과 채점자 간 신뢰도 확보가 까다롭다는 점이 함께 논의된다.
구성형 응답 문항은 답의 개방성 정도에 따라 정답이 하나로 고정된 단답형·완성형과, 서술의 자유도가 높은 서술형·논술형으로 나뉘며, 자유도가 높아질수록 채점 기준의 정교화 부담도 커진다는 상관관계가 지적된다.
선택형 문항과 달리 추측에 의한 정답 확률을 사실상 배제할 수 있다는 점이 문항반응이론 적용 시에도 주요한 차이로 다뤄진다.
주의할 점
구성형 응답 문항은 채점에 시간이 많이 들고 채점자의 주관이 개입될 위험이 있어, 명확한 채점 기준과 예시 답안을 사전에 마련해야 한다는 점에 유의해야 한다.
채점 기준이 사전에 충분히 공유되지 않은 상태에서 여러 채점자가 동시에 채점하면, 동일한 답안이라도 채점자에 따라 부분점수 부여 기준이 달라져 신뢰도가 크게 흔들릴 수 있다는 점에 유의해야 한다.
헷갈리기 쉬운 용어
문항 형식에 따라 이름이 나뉩니다.
| 용어 | 응답 방식 | 채점 특징 |
|---|---|---|
| 선택형(객관식) | 제시된 선택지에서 고름 | 기계 채점 가능, 추측 정답 가능성 |
| 단답형·완성형 | 짧은 답을 직접 씀 | 정답이 정해져 있어 채점 쉬움 |
| 서술형평가 | 답을 자기 말로 구성해 서술 | 채점 기준표 필요, 부분점수 가능 |
| 논술형평가 | 논거를 갖추어 자기 관점을 전개 | 자유도가 가장 높아 채점 일관성 부담이 큼 |
참고 문헌
- Bennett, R. E., & Ward, W. C. (Eds.). (1993). Construction Versus Choice in Cognitive Measurement: Issues in Constructed Response, Performance Testing, and Portfolio Assessment. Lawrence Erlbaum Associates.
- Lukhele, R., Thissen, D., & Wainer, H. (1994). On the relative value of multiple-choice, constructed-response, and examinee-selected items on two achievement tests. Journal of Educational Measurement, 31(3), 234–250.
- Haladyna, T. M. (2004). Developing and Validating Multiple-Choice Test Items (3rd ed.). Lawrence Erlbaum Associates.
표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.