구성타당도 (Construct Validity)
쉽게 풀면
"우울"이나 "자존감"처럼 눈에 보이지 않는 개념을 설문으로 잰다고 해봅시다. 문항을 아무리 그럴듯하게 만들어도, 그 점수가 정말 "우울"을 재는 건지, 아니면 슬쩍 "불안"이나 "스트레스"를 재고 있는 건지는 눈으로 확인할 수 없습니다. 구성타당도는 바로 이 질문에 답하는 개념입니다. 마치 체온계로 몸무게를 재려는 게 아닌지 검증하는 것과 비슷합니다. 보통 이 척도의 점수가 이론적으로 관련 있어야 할 다른 변수와는 실제로 관련이 있고(수렴타당도), 관련 없어야 할 변수와는 관련이 없는지(판별타당도)를 함께 확인해서 판단합니다.
왜 중요한가
심리학, 교육학, 경영학처럼 눈에 보이지 않는 개념(태도, 동기, 조직몰입 등)을 다루는 분야에서는 새로운 척도를 만들거나 기존 척도를 다른 집단·문화권에 적용할 때마다 그 척도가 원래 재려던 개념을 제대로 재고 있는지를 먼저 검증해야 합니다. 구성타당도가 확보되지 않은 척도로 얻은 결과는 아무리 통계적으로 유의해도 해석 자체가 흔들리기 때문에, 논문 심사에서 척도의 타당화 절차는 거의 필수적으로 요구됩니다. 그래서 구성타당도는 개별 연구뿐 아니라 척도 개발·검증 연구 전체를 떠받치는 기초 개념으로 자주 언급됩니다.
논문에서는 이렇게 쓰입니다
이 문장은 "이 척도의 점수가 실제로 측정하고자 한 추상적 개념을 이론에 맞게 재고 있는지를, 관련 변수와의 관계를 통해 검증했다"는 뜻입니다.
경영학·조직행동 연구에서는 이렇게 개념적으로 가까운 변수(직무만족)와는 관련이 있고, 반대 방향으로 예측되는 변수(이직의도)와는 예상된 관계를 보이는지를 통해 구성타당도를 뒷받침합니다.
교육심리학 연구에서는 문항들이 이론이 예상한 하위요인(예: 과제 자신감, 사회적 자신감 등)으로 잘 묶이는지를 요인분석으로 확인해 구성타당도의 근거로 삼기도 합니다.
조금 더 깊게 보면
구성타당도는 한 번의 검정으로 끝나는 것이 아니라 여러 근거를 누적해 판단하는 개념입니다. 흔히 함께 언급되는 하위 개념으로는 이론적으로 관련 있는 변수와 실제로 관련이 있는지를 보는 수렴타당도, 관련 없어야 할 변수와는 관련이 없는지를 보는 판별타당도가 있으며, 이 둘을 함께 검토하는 다속성-다측정법(MTMM) 접근이 대표적인 방법으로 소개되곤 합니다. 확인적 요인분석에서 산출되는 요인적재량이나 모형 적합도 지수도 구성타당도를 뒷받침하는 통계적 근거로 자주 함께 보고됩니다. 다만 구성타당도는 완벽하게 "확정"되는 성질의 것이라기보다, 연구가 누적될수록 점차 더 탄탄한 근거를 쌓아가는 지속적인 검증 과정으로 이해하는 것이 일반적입니다.
주의할 점
구성타당도는 문항이 내용 영역을 골고루 담았는지를 보는 내용타당도나, 이미 검증된 외부 기준과의 일치도를 보는 준거타당도와는 다른 개념입니다. 측정 대상인 추상적 개념 자체는 구성개념 문서를 함께 참고하면 이해가 쉽습니다.