다분문항반응이론 (Polytomous IRT)

한 줄 정의: 정답·오답 두 가지로만 채점하는 문항이 아니라, 부분점수나 여러 단계의 응답 범주를 가진 문항에도 적용할 수 있도록 문항반응이론을 확장한 모형입니다.

쉽게 풀면

객관식 시험처럼 "맞다/틀리다"로만 채점되는 문항이라면 기본적인 문항반응이론으로 충분합니다. 하지만 "전혀 그렇지 않다~매우 그렇다"의 5단계 설문 문항이나, 서술형 답안에 0점·1점·2점처럼 부분점수를 주는 문항은 두 가지로 나눌 수 없습니다. 다분문항반응이론은 이런 여러 단계의 응답에 대해, 각 단계로 넘어갈 확률이 응답자의 능력(또는 태도) 수준에 따라 어떻게 달라지는지를 모형화합니다. 등급반응모형(Graded Response Model)이나 부분점수모형(Partial Credit Model)이 대표적인 예이며, 결과적으로 문항 하나하나가 응답자를 얼마나 정교하게 구분해내는지 훨씬 세밀하게 평가할 수 있습니다.

왜 중요한가

심리검사나 설문의 대부분은 리커트 척도처럼 서술형 응답이나 다단계 응답으로 구성되어 있어, 정답·오답만 다루는 이분형 문항반응이론으로는 응답 정보를 온전히 활용할 수 없습니다. 다분문항반응이론은 각 응답 단계가 담고 있는 정보를 살려 문항과 척도의 정밀도를 높이기 때문에, 심리측정학, 교육평가, 임상척도 개발 등에서 척도의 타당성을 검증할 때 핵심적으로 다뤄집니다. 또한 여러 집단 간 척도가 동등하게 작동하는지를 보는 측정불변성 연구의 기초가 되기도 합니다.

논문에서는 이렇게 쓰입니다

"5점 리커트 척도로 측정된 설문 문항에 등급반응모형을 적용하여 각 문항의 단계별 임계값을 추정하였다."

이 문장은 단순히 문항 전체의 난이도만 보는 것이 아니라, "1점에서 2점으로", "2점에서 3점으로" 넘어가는 각 경계 지점마다 별도의 난이도(임계값)를 추정했다는 뜻입니다.

"서술형 문항의 부분점수 채점 결과에 부분점수모형을 적용하여 각 점수 단계의 문항정보함수를 산출하였다."

교육평가 연구에서 서술형 시험 문항이 능력 수준별로 얼마나 변별력을 갖는지 분석할 때 쓰이는 표현입니다.

"우울 증상 척도의 각 문항에 다분문항반응모형을 적용하여 문항별 정보량이 임상적으로 유의미한 능력 범위와 일치하는지 검토하였다."

임상심리 척도 개발 연구에서 문항이 어떤 증상 심각도 구간에서 가장 변별력이 높은지 확인할 때 사용되는 표현입니다.

조금 더 깊게 보면

다분문항반응모형은 응답 범주의 순서를 어떻게 다루느냐에 따라 등급반응모형, 부분점수모형, 일반화부분점수모형 등으로 나뉘며, 모형마다 범주 간 변별력을 동일하게 볼지 문항마다 다르게 볼지가 다릅니다. 각 모형은 문항정보함수를 통해 특정 능력 수준에서 문항이 얼마나 정밀한 정보를 제공하는지 보여주며, 이를 합산한 검사정보함수는 척도 전체의 측정 정밀도를 요약하는 데 쓰입니다. 모형 적합도는 흔히 우도비 검정이나 정보기준(AIC, BIC) 등으로 비교됩니다.

주의할 점

다분문항반응이론은 응답 범주가 3개 이상일 때만 의미가 있으며, 범주 수가 적거나 응답자 수가 충분하지 않으면 각 단계별 모수를 안정적으로 추정하기 어렵습니다. 기본적인 이분형 문항반응이론과 마찬가지로 표본 크기와 모형 적합도를 충분히 점검한 뒤 결과를 해석해야 합니다.