공인타당도 (Concurrent Validity)
쉽게 풀면
새로 만든 우울 척도가 정말 우울을 잘 재는지 확인하고 싶다면 어떻게 해야 할까요? 가장 직접적인 방법은, 이미 널리 쓰이고 있어 신뢰할 수 있는 기존 우울 척도(또는 임상의의 진단)를 같은 사람들에게 "동시에" 실시해서 두 점수가 서로 비슷하게 나오는지 보는 것입니다.
두 점수의 상관관계가 높다면 "새 척도도 제대로 측정하고 있구나"라고 판단할 수 있습니다. 이렇게 "지금 시점"의 외부 기준과 비교하는 것이 공인타당도이며, 준거타당도의 대표적인 하위 유형입니다. 미래 결과를 예측하는지 보는 예측타당도와 짝을 이루는 개념으로, 차이는 비교 기준을 "지금" 재는지 "나중에" 재는지에 있습니다.
왜 중요한가
새로운 측정도구를 개발하는 논문에서는 "이 도구가 실제로 측정하려는 개념을 제대로 재고 있는가"를 입증하는 것이 핵심 과제입니다.
공인타당도는 이미 신뢰를 얻은 기존 척도나 실측 기준과 동시에 비교함으로써 이를 비교적 빠르고 명확하게 보여줄 수 있어, 심리검사·설문 개발뿐 아니라 임상 진단 도구, 조직 진단 지표 등 다양한 분야의 척도 타당화 연구에서 필수적으로 보고됩니다.
또한 기존 검사가 시간이나 비용이 많이 들 때, 더 간편한 대체 검사를 개발하고 그 대체 가능성을 입증하는 근거로도 널리 활용됩니다.
핵심 정리
- 공인타당도(동시타당도)는 새 검사의 점수를 같은 시기에 측정한 준거(이미 검증된 검사, 진단, 실측값)와 비교해 얼마나 맞는지 보는 근거입니다. 준거가 나중 시점의 결과이면 예측타당도입니다.
- “타당도의 종류”로 따로 세는 방식은 고전적인 분류입니다. 미국 교육·심리 검사 표준(AERA 외, 2014)은 타당도를 하나로 보고, 그 근거를 검사 내용·반응 과정·내적 구조·다른 변수와의 관계·결과 등으로 나눕니다. 공인타당도는 이 가운데 “다른 변수와의 관계”에 해당합니다.
- 준거의 종류에 따라 통계 방법이 달라집니다.
| 준거의 형태 | 흔히 쓰는 방법 |
|---|---|
| 연속 점수(기존 척도, 측정 장비) | 피어슨(또는 스피어만) 상관계수, 두 방법의 일치도(급내상관, Bland–Altman 분석) |
| 범주(진단 있음/없음) | 민감도·특이도, ROC 곡선 |
예시로 보기
작은 계산 예(가상의 예). 새 우울 척도와 기존에 널리 쓰이는 우울 척도를 같은 날 60명에게 실시해 r = 0.72를 얻었다고 합시다.
- 95% 신뢰구간은 피셔의 z 변환으로 구하면 [0.57, 0.82]입니다. 표본이 작을수록 구간이 넓어집니다.
- r² = 0.52이므로 두 점수는 분산의 약 52%를 공유합니다. “상관이 높다”와 “같은 점수를 낸다”는 다른 말입니다.
- 두 척도의 신뢰도가 각각 .80과 .90일 때 관찰된 상관이 .60이라면, 측정 오차를 보정한 상관(감쇠 보정)은 .60 ÷ √(.80×.90) = 0.71입니다. 신뢰도가 낮으면 타당도 계수도 낮게 나올 수 있다는 뜻이므로, 신뢰도를 함께 봐야 합니다.
상관이 얼마 이상이어야 하는지에 대한 보편적 기준은 없습니다. 비교 대상이 같은 개념을 재는 척도라면 보통 중간 이상의 상관을 기대하고, 비교 대상이 다른 방식(예: 자기보고와 임상가 평정)이라면 그보다 낮은 값도 흔합니다.
자주 하는 오해
| 오해 | 바로잡기 |
|---|---|
| 기존 척도와 상관이 높으면 새 척도가 더 좋다. | 같은 것을 잰다는 근거일 뿐 더 우수하다는 근거가 아닙니다. 새 척도의 이점(짧음, 비용, 특정 집단에서의 적합성)은 따로 보여야 합니다. |
| 기존 척도가 “정답”이다. | 준거 자체가 오차와 한계를 갖습니다. 준거로 삼은 이유와 그 척도의 타당도 근거를 함께 제시해야 합니다. |
| 상관이 높으니 점수를 서로 바꿔 써도 된다. | 상관은 순서의 일치를 보여 주지만 평균 수준의 일치는 보지 못합니다. 서로 대체하려면 평균 차이나 일치도 분석이 필요합니다. |
| 공인타당도 하나로 타당도 검증이 끝난다. | 내용, 내적 구조, 다른 개념과의 구별(판별) 등 여러 근거를 모아야 합니다. |
논문에서는 이렇게 쓰입니다
실제 논문에서
국내 학술지 논문에서 이 용어가 쓰인 문장을 그대로 옮겼습니다. 제목·학술지·연도와 원문 링크를 함께 적었습니다.
“마지막으로 준거 도구와의 상관관계를 통하여 공인타당도를 확인하였다.”
초등교사 행위주체성 측정 도구 개발, 교원교육, 2024 · KCI 한국학술지인용색인 · 원문 보기 ↗
“결론: 아동화용언어체크리스트(CPLC)의 공인타당도가 확인되었고 민감도와 특이도가 대체로 높아 임상적으로 유용한 척도임을 알 수 있었다.”
아동화용언어체크리스트(CPLC)의 타당도 연구, 언어치료연구, 2018 · KCI 한국학술지인용색인 · 원문 보기 ↗
“개발된 측정 도구의 통계적 신뢰도 및 타당도 검증한 결과, 양호한 수준의 수렴 및 변별 타당도, 문항 간 내적 일치도, 동시타당도가 확보된 것으로 나타났다.”
임무형지휘 측정을 위한 척도 개발 연구, 국방연구, 2022 · KCI 한국학술지인용색인 · 원문 보기 ↗
예시 문장
아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.
이 문장은 "새로 만든 척도의 점수가 이미 검증된 기존 척도의 점수와 같은 시점에 비교했을 때 서로 잘 들어맞았다"는 뜻이며, 이를 근거로 새 척도의 타당성을 주장하는 것입니다.
임상 장면에서 시간이 오래 걸리는 표준 검사 대신 더 짧고 간편한 선별검사를 새로 만든 뒤, 같은 사람들에게 두 검사를 동시에 실시해 결과가 비슷하게 나오는지를 확인한 사례입니다. 이는 새 검사가 기존의 정교한 검사를 대체할 수 있는 실용적 대안이 될 수 있음을 보여주는 근거로 쓰입니다.
산업·조직심리 분야에서는 새로 개발한 설문 문항들이 기존에 검증된 조직몰입 척도와 비슷한 응답 패턴을 보이는지를 같은 설문 조사 안에서 동시에 확인함으로써, 새 척도가 같은 개념을 측정하고 있음을 뒷받침하는 방식으로 자주 쓰입니다.
조금 더 깊게 보면
공인타당도는 실무적으로 두 검사 점수 간의 상관계수(예: 피어슨 상관계수)를 산출해 그 크기와 유의성으로 판단하는 경우가 많으며, 상관이 클수록 새 도구가 기존 기준과 같은 개념을 측정하고 있다는 근거가 강해집니다.
다만 상관계수만으로는 두 검사의 절대적인 점수 수준이 일치하는지까지는 알 수 없기 때문에, 필요에 따라 평균 차이 검정이나 일치도 분석을 함께 보고하기도 합니다.
또한 비교 기준(criterion)을 무엇으로 선택하느냐가 결과에 큰 영향을 주므로, 논문을 읽을 때는 저자가 어떤 근거로 그 기존 척도를 "충분히 검증된 기준"으로 채택했는지도 함께 살펴보는 것이 좋습니다. 넓게 보면 공인타당도와 예측타당도는 모두 준거타당도라는 상위 개념 아래 묶이는 두 축이라 할 수 있습니다.
주의할 점
공인타당도가 높다고 해서 새 척도가 기존 척도보다 더 우수하다는 뜻은 아닙니다. 단지 "기존에 인정받는 기준과 비슷한 결과를 낸다"는 것을 보여줄 뿐이며, 비교 대상으로 삼은 기존 척도 자체의 구성타당도가 부족하다면 공인타당도 결과도 의미가 퇴색됩니다.
헷갈리기 쉬운 용어
준거와 비교한다는 점은 같고, 비교 대상의 시점·성격이 다릅니다.
| 용어 | 비교하는 대상 | 한 줄 설명 |
|---|---|---|
| 준거타당도 | 준거(기준)와의 관계 전체 | 공인타당도와 예측타당도를 묶는 상위 개념 |
| 공인타당도(동시타당도) | 같은 시기에 측정한 준거 | 현재 상태를 얼마나 잘 맞히는가 |
| 예측타당도 | 나중에 측정되는 준거 | 미래의 결과를 얼마나 잘 예측하는가 |
| 수렴타당도 | 같은 개념을 다른 방법으로 잰 척도 | 반드시 “금 기준”이 있어야 하는 것은 아님. 구성타당도의 근거 |
참고 문헌
- American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (2014). Standards for Educational and Psychological Testing. American Educational Research Association.
- Cronbach, L. J., & Meehl, P. E. (1955). Construct validity in psychological tests. Psychological Bulletin, 52(4), 281–302.
- Bland, J. M., & Altman, D. G. (1986). Statistical methods for assessing agreement between two methods of clinical measurement. The Lancet, 327(8476), 307–310.
- Anastasi, A., & Urbina, S. (1997). Psychological Testing (7th ed.). Prentice Hall.
표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.