용어 목록 > 예측타당도 (Predictive Validity)

예측타당도 (Predictive Validity)

쉽게 풀면

대학 입학시험 점수가 정말 쓸모가 있으려면, 그 점수가 높은 학생이 실제로 입학 후에도 학업 성취가 높아야 합니다. 이렇게 "지금 측정한 점수가 나중에 벌어질 일을 얼마나 잘 맞히는가"를 확인하는 것이 예측타당도입니다.

검사 점수를 먼저 측정해두고, 시간이 흐른 뒤 실제 결과(졸업 학점, 업무 성과, 재발 여부 등)를 확인해 둘 사이의 상관관계를 계산합니다. 상관이 높을수록 그 검사가 미래 예측 도구로서 쓸모 있다고 봅니다.

준거타당도의 하위 유형이라는 점에서 공인타당도와 뿌리가 같지만, 비교 기준 자료를 "같은 시점"이 아니라 "미래 시점"에 수집한다는 점이 다릅니다.

왜 중요한가

측정도구가 실제로 미래의 결과를 예측하는 데 쓸모가 있는지를 보여주는 것은 심리검사, 채용 도구, 의학적 선별검사 등 실무에 바로 활용되는 도구의 가치를 입증하는 핵심 근거입니다. 그래서 예측타당도는 교육심리학, 조직심리학, 의학 등 검사도구를 개발하고 검증하는 여러 분야의 논문에서 도구의 실용성을 뒷받침하는 필수 검증 절차로 다뤄집니다.

핵심 정리

예측타당도는 지금 잰 점수가 나중에 생길 기준(준거) 변수를 얼마나 잘 맞히는가에 대한 증거입니다. 준거타당도의 한 갈래로, 같은 시점의 기준과 비교하는 공인(동시)타당도와 달리 기준을 시간이 지난 뒤 수집합니다.

• 설계: 시점 1에 검사 점수를 얻고, 시점 2에 준거(졸업 학점, 직무 성과, 재발 여부 등)를 얻은 뒤 둘의 관계를 봅니다.
• 지표: 준거가 연속형이면 상관계수·회귀계수, 이분형(재발/비재발)이면 민감도·특이도, 로지스틱 회귀, AUC 등을 씁니다.
• “타당도는 검사가 가진 성질이 아니라, 점수를 특정 목적에 쓰는 해석을 뒷받침하는 증거의 정도”라는 관점이 표준입니다(AERA 외, 2014). 한 번의 계수로 ‘타당하다/아니다’를 가르지 않습니다.

예시로 보기

예측타당도 계수는 표본이 걸러진 방식에 크게 좌우됩니다. 입사 시험 점수와 입사 1년 뒤 성과의 상관을 구하려는데, 성과 자료가 합격자에게만 있다면 점수 범위가 좁아진(범위 제한) 표본에서 계수를 구하게 되어 실제보다 작게 나옵니다.

(가상의 예) 합격자만의 상관이 r = 0.30이고, 지원자 전체의 점수 표준편차가 합격자 표준편차의 1.5배(u = 1.5)라고 합시다. 범위 제한 보정(손다이크의 Case II 공식, Thorndike, 1949)은 다음과 같습니다.

R = r·u / √(1 − r² + r²·u²)

대입하면 R = 0.43입니다. 보정은 표본의 선발이 해당 검사 점수로 이루어졌다는 등의 가정이 있을 때만 정당하므로, 보정 전 값과 보정 후 값, 그리고 보정 방법을 함께 밝혀야 합니다(Sackett와 Yang, 2000).

자주 하는 오해

• “상관이 .30이면 쓸모없다.” 인사 선발 분야에서는 .2~.5 수준의 계수가 흔합니다. 예컨대 Schmidt와 Hunter(1998)는 일반 정신능력 검사의 직무수행 예측타당도를 약 .51로 보고했는데, 이 값은 범위 제한과 준거 측정오차를 보정한 추정치입니다. 계수의 의미는 비용·위험·대안 검사와 견주어 판단합니다.
• “예측타당도가 높으면 개인도 정확히 맞힌다.” 집단 수준의 상관이 높아도 개인 수준의 예측 오차는 큽니다. 이분 결과에서는 발생률(기저율)에 따라 양성예측도가 크게 달라집니다.
• “같은 표본에서 구한 계수를 그대로 믿어도 된다.” 회귀식을 같은 자료로 만들고 평가하면 새 표본에서는 계수가 줄어드는 경향이 있습니다. 교차검증이나 새 표본에서 확인합니다.
• 준거의 질도 중요합니다. 성과 평가 자체가 부정확하거나 검사 점수를 아는 평가자가 매겼다면 예측타당도가 왜곡됩니다(준거 오염).

논문에서는 이렇게 쓰입니다

실제 논문에서

국내 학술지 논문에서 이 용어가 쓰인 문장을 그대로 옮겼습니다. 제목·학술지·연도와 원문 링크를 함께 적었습니다.

• “또한 로지스틱 회귀분석을 통하여 「직업기능스크리닝 검사」의 예측타당도를 알아본 결과 「직업기능스크리닝 검사」는 실제 직업적 장애 판별에 있어 유용한 도구인 것으로 나타났다.”

  「직업기능스크리닝 검사」의 진단적 효율성 탐색중심으로, 장애와 고용, 2015 · KCI 한국학술지인용색인 · 원문 보기 ↗

• “PSM을 통제한후에도 PSE의 각 유형들은 행정 성과(개인, 팀, 기관)에 유의미한 영향을 보여 새로운 측정도구의 예측타당도가 확인되었으며, 특히 전문적 에토스는 PSM보다 기관 성과에 더 큰 영향을 미쳤다.”

  공직 에토스의 다차원성: 개념화와 측정, 한국행정연구, 2025 · KCI 한국학술지인용색인 · 원문 보기 ↗

• “예측타당도 검증 결과 민감도는 91.1%, 특이도 82.4%, 양성예측도 52.6% 및 음성예측도는 97.8%로 나타났다.”

  한국형 성인 환자 섬망 선별 도구 개발, 임상간호연구, 2023 · KCI 한국학술지인용색인 · 원문 보기 ↗

예시 문장

아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.

이 문장은 "입사할 때 본 검사 점수가 실제로 1년 뒤의 업무 성과와 관련이 있었다"는 뜻으로, 이 검사가 미래의 성과를 미리 가늠하는 데 쓸모 있다는 근거로 제시된 것입니다.

교육 분야에서 조기에 측정한 심리 척도가 나중에 발생하는 학업 결과를 얼마나 잘 예측하는지를 검증한 예입니다.

조금 더 깊게 보면

예측타당도를 수치로 보고할 때는 흔히 예측 변수와 결과 변수 사이의 상관계수나 회귀계수를 제시합니다. 다만 이 값은 표본이 특정 범위로 제한되어 있으면(예: 이미 합격한 사람들만 대상으로 함) 실제보다 낮게 나타나는 범위제한 문제가 발생할 수 있어, 논문을 읽을 때는 표본 구성이 결과 변수의 전체 범위를 잘 반영하고 있는지 함께 살펴보는 것이 좋습니다.

주의할 점

예측타당도를 확인하려면 시간 간격을 두고 두 번 자료를 모아야 하므로, 그 사이에 표본이 줄어드는 추적관찰 탈락이 발생하면 상관관계가 왜곡될 수 있습니다. 탈락자의 특성이 무작위가 아니라면 예측타당도가 실제보다 과대 또는 과소 추정될 위험이 있습니다.

헷갈리기 쉬운 용어

준거타당도의 하위 유형은 ‘기준을 언제 재는가’로 갈립니다.

참고 문헌

1. Cronbach, L. J., & Meehl, P. E. (1955). Construct validity in psychological tests. Psychological Bulletin, 52(4), 281–302.
2. Schmidt, F. L., & Hunter, J. E. (1998). The validity and utility of selection methods in personnel psychology: Practical and theoretical implications of 85 years of research findings. Psychological Bulletin, 124(2), 262–274.
3. Sackett, P. R., & Yang, H. (2000). Correction for range restriction: An expanded typology. Journal of Applied Psychology, 85(1), 112–118.
4. Thorndike, R. L. (1949). Personnel Selection: Test and Measurement Techniques. Wiley.
5. American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (2014). Standards for Educational and Psychological Testing. American Educational Research Association.

표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.

관련 용어