용어 목록 > 문항반응이론 (Item Response Theory)

문항반응이론 (Item Response Theory)

쉽게 풀면

기존 방식(고전검사이론)은 "이 학생이 10문제 중 7개를 맞혔다"는 총점만 보고 실력을 판단합니다. 반면 문항반응이론은 "이 문제는 어느 정도 실력이어야 절반의 확률로 맞힐 수 있는가(난이도)", "이 문제가 실력 차이가 나는 학생들을 얼마나 잘 구분해내는가(변별도)"를 문항 하나하나마다 따로 계산합니다.

높이뛰기 경기에서 바를 여러 높이로 놓고 각 선수가 어느 높이까지 넘는지 지켜보면, 단순히 "1승"이라는 결과보다 바의 높이(문항 난이도)를 함께 고려할 때 선수의 실력을 훨씬 정교하게 비교할 수 있는 것과 비슷한 원리입니다.

왜 중요한가

문항반응이론은 검사 개발과 심리측정학의 핵심 방법론으로, 문항은행 구축이나 컴퓨터화 적응검사(CAT)처럼 응답자마다 다른 문항 조합을 제시하고도 결과를 같은 척도에서 비교할 수 있게 해줍니다. 이 때문에 대규모 표준화 검사, 국가 학업성취도 평가, 임상 및 교육 분야의 척도 개발 연구에서 널리 활용됩니다.

또한 문항 편향(DIF, 차별적 문항기능) 분석의 기반이 되어, 검사가 특정 집단에 불공정하게 작동하지 않는지 확인하는 데도 핵심적으로 쓰입니다.

핵심 정리

• 문항반응이론(IRT)은 응답자의 잠재 특성 θ(능력, 태도 등)와 문항의 성질로 “이 문항에 정답을 하거나 높게 응답할 확률”을 모형화합니다. 그 곡선이 문항특성곡선입니다.
• 2모수 로지스틱 모형: P(θ) = 1 ÷ (1 + e−a(θ − b)). b는 난이도(정답 확률이 .5가 되는 θ), a는 변별도(곡선의 가파름)입니다.
• 1모수(Rasch) 모형은 모든 문항의 a를 같다고 두고 b만 추정하고, 3모수 모형은 찍어서 맞힐 확률(c, 추측도)을 더합니다.
• θ의 눈금은 보통 평균 0, 표준편차 1로 두는 것이 관례이며, 어떤 θ에서 얼마나 정밀하게 측정하는지는 정보함수로 나타냅니다. 2모수 모형에서 θ = b일 때의 문항 정보는 a² ÷ 4입니다.

예시로 보기

세 문항의 정답 확률입니다(계산 결과).

• 문항 C는 문항 A보다 쉽습니다(b가 낮아 같은 θ에서 확률이 높음).
• 문항 B는 변별도가 큽니다. 같은 난이도(b = 0.5)에서도 θ가 0에서 1로 바뀔 때 확률이 .27에서 .73으로 크게 변해 θ가 높은 사람과 낮은 사람을 잘 가릅니다. θ = 0.5에서의 문항 정보는 A가 0.25, B가 1.0입니다.
• 3모수 모형에서 c = .2이면 θ가 아주 낮아도 정답 확률이 .2 밑으로 내려가지 않습니다.

자주 하는 오해

• “IRT 점수 θ는 정답 개수의 다른 이름”이 아닙니다. 같은 정답 개수라도 어떤 문항을 맞혔는지에 따라 θ 추정치가 달라질 수 있습니다(2모수 이상).
• “문항 모수는 어느 집단에서나 똑같다”는 모형이 자료에 잘 맞을 때 기대되는 성질입니다. 단일차원성·지역독립성 가정과 모형 적합도를 확인해야 합니다.
• 고전검사이론의 난이도(정답률)는 표본에 따라 달라지지만, IRT의 b는 이상적으로는 집단에 덜 의존하는 척도입니다.
• 신뢰도가 하나의 숫자(크론바흐 알파)가 아니라 θ에 따라 달라지는 정보로 표현된다는 점이 다릅니다. 극단적인 θ에서는 측정이 부정확할 수 있습니다.
• 모수가 많은 2·3모수 모형은 보통 더 큰 표본이 필요합니다.

논문에서는 이렇게 쓰입니다

실제 논문에서

국내 학술지 논문에서 이 용어가 쓰인 문장을 그대로 옮겼습니다. 제목·학술지·연도와 원문 링크를 함께 적었습니다.

• “수집된 학생 응답 자료를 고전 검사 이론의 추리 통계와 문항 반응 이론의 Rasch 모델에 적용하여 분석하였다.”

  순위 선다형 문항을 이용한 초·중·고등학생의 천문학적 사고 분석, 대한지구과학교육학회지, 2018 · KCI 한국학술지인용색인 · 원문 보기 ↗

• “문항반응이론을 사용하여 조사한 결과 3, 4급 모든 항목과 5급 ‘주어+把+목적어+동사+着’ 항목의 난이도에 차이가 거의 없었다.”

  한국인 중국어 학습자를 위한 문법 항목 연구 방법론 탐색 -‘把’구문 문법 항목 순서를 중심으로-, 한민족문화연구, 2023 · KCI 한국학술지인용색인 · 원문 보기 ↗

• “이러한 결과들은 라쉬 모델과 2파라미터 모델을 이용한 IRT로 추론할 수 있다.”

  소비자 지식의 측정: IRT 방법의 응용, 비즈니스융복합연구, 2023 · KCI 한국학술지인용색인 · 원문 보기 ↗

예시 문장

아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.

이 문장은 척도나 표준화 검사를 개발하는 논문의 결과 부분에서, 특정 문항이 응답자의 실제 능력 차이를 잘 반영하지 못한다는 것을 보여줍니다. 문항반응이론은 수능, 토익 같은 표준화 검사나 심리검사를 개발할 때 문항을 선별하는 근거로 널리 쓰이며, 서로 다른 검사를 받은 응답자들의 점수를 같은 척도 위에서 비교할 수 있게 해줍니다.

검사 공정성을 다루는 연구에서, 능력 수준이 같더라도 성별과 같은 특정 집단에 따라 정답 확률이 달라지는 문항을 문항반응이론으로 찾아냈다는 뜻입니다.

교육공학·심리측정 분야에서 문항반응이론이 응답자별 맞춤형 문항 제시(적응검사)의 이론적 토대로 쓰인다는 것을 보여주는 예문입니다.

조금 더 깊게 보면

문항반응이론에는 문항 특성을 몇 개의 모수로 나타내느냐에 따라 1모수(라쉬 모형), 2모수, 3모수(추측 요인 포함) 로지스틱 모형 등 여러 변형이 있으며, 논문에서 어떤 모형을 썼는지에 따라 추정되는 모수의 의미가 달라집니다.

또한 결과 해석에는 각 문항이 능력 수준별로 얼마나 많은 정보를 제공하는지를 보여주는 "문항정보함수"와, 이를 합산한 검사정보함수가 자주 함께 제시됩니다. 논문을 읽을 때는 어떤 모형을 적용했는지, 그리고 단일차원성이나 지역독립성 같은 기본 가정을 사전에 검증했는지를 확인하는 것이 좋습니다.

주의할 점

문항반응이론을 안정적으로 적용하려면 문항 수와 표본 크기가 충분히 커야 하며, 하나의 검사가 단 하나의 특성만 측정한다는 "단일차원성" 가정을 전제로 합니다. 이는 문항들의 내적 일관성을 보는 크론바흐 알파와는 전혀 다른 접근이므로 두 개념을 혼동하지 않아야 합니다.

헷갈리기 쉬운 용어

검사 점수를 다루는 이론과 지표를 구분합니다.

‘문항반응이론’과 ‘고전검사이론’은 경쟁 관계의 이론이 아니라 서로 다른 관점입니다. 논문에서는 어느 쪽 지표를 쓰는지 밝힙니다.

참고 문헌

1. Rasch, G. (1960). Probabilistic Models for Some Intelligence and Attainment Tests. Danmarks Pædagogiske Institut.
2. Lord, F. M. (1980). Applications of Item Response Theory to Practical Testing Problems. Lawrence Erlbaum.
3. Hambleton, R. K., Swaminathan, H., & Rogers, H. J. (1991). Fundamentals of Item Response Theory. Sage.
4. Embretson, S. E., & Reise, S. P. (2000). Item Response Theory for Psychologists. Lawrence Erlbaum.

표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.

관련 용어