구성개념 과소대표 (construct underrepresentation)

연구방법론
한 줄 정의: 측정도구가 원래 의도한 구성개념의 중요한 측면이나 차원을 충분히 포괄하지 못하고 일부만 좁게 담아내는 문제를 말한다.

쉽게 풀면

'창의성'이라는 개념이 여러 하위 측면(독창성, 유창성, 유연성 등)을 포함한다고 할 때, 측정도구가 그중 한두 가지만 재고 나머지는 다루지 못한다면 그 도구는 창의성이라는 개념을 온전히 대표하지 못하는 것입니다. 이런 상태를 구성개념 과소대표라고 합니다. 이는 구성타당도를 위협하는 대표적인 방식 중 하나로, 측정 결과가 개념의 일부 단면만 보여주게 됩니다.

왜 중요한가

구성개념 과소대표는 구성타당도(construct validity) 논의의 핵심 축 중 하나로, 측정도구의 타당성을 검증하는 거의 모든 연구에서 반드시 점검해야 하는 문제로 다뤄진다. 새로운 척도를 개발하거나 기존 척도를 다른 맥락에 적용하는 논문에서는 이 문제가 결과 해석의 신뢰성을 좌우하기 때문에 도구 개발 및 타당화 절차 전반에서 반복적으로 언급된다. 또한 메타분석이나 후속 연구에서 서로 다른 척도 간 결과가 일치하지 않을 때, 그 원인을 진단하는 근거로도 자주 활용된다.

논문에서는 이렇게 쓰입니다

"단일 하위영역 문항만으로 구성된 척도는 구성개념 과소대표의 문제를 안고 있을 수 있다."

측정도구가 개념의 전체 범위를 포괄하지 못하는 한계를 지적하는 문장이다.

"직무만족을 급여 만족 항목만으로 측정한 본 연구의 척도는 구성개념 과소대표로 인해 직무만족의 다차원적 속성을 충분히 반영하지 못했을 가능성이 있다."

조직심리학 연구에서 다차원 개념을 일부 하위요인으로만 측정했을 때의 한계를 논의하는 문장이다.

"학업성취를 표준화 시험 점수로만 조작화한 것은 비판적 사고력이나 협업능력과 같은 학습성과의 다른 측면을 배제함으로써 구성개념 과소대표를 초래할 수 있다."

교육학 연구에서 성과 지표 선택이 구성개념을 좁게 대표하게 되는 문제를 지적하는 문장이다.

조금 더 깊게 보면

구성개념 과소대표는 구성개념 타당도를 위협하는 두 축 중 하나이며, 반대편에는 구성개념과 무관한 요인이 측정에 섞여 들어가는 구성개념 무관분산(construct-irrelevant variance)이 있다. 이를 진단할 때는 개념의 이론적 정의로부터 도출된 요인구조가 실제 측정 결과에서 얼마나 재현되는지를 확인하는 확인적 요인분석(confirmatory factor analysis)이나 내용타당도 검토가 흔히 활용된다. 또한 척도가 다루는 하위차원의 수와 구성이 이론에서 제시하는 법칙적 관계망(nomological network)과 얼마나 부합하는지를 함께 살펴보는 것도 일반적인 접근이다.

주의할 점

구성개념 과소대표를 줄이려면 개념의 이론적 정의에 포함된 모든 하위차원을 검토하여 균형 있게 문항을 구성해야 한다.

관련 용어