절단점설정법 (Cutoff Score Setting)
쉽게 풀면
자격시험에서 100점 만점에 몇 점부터 합격시킬지, 혹은 우울 척도에서 몇 점 이상이면 "임상적으로 유의미한 우울"로 볼지는 누군가 정해야 합니다. 이 기준선을 정하는 작업이 절단점설정법입니다. 대표적인 방법으로는 여러 전문가가 "이 문항을 겨우 합격할 만한 사람이 맞힐 확률"을 각각 추정해 평균 내는 앤고프(Angoff) 방법이 있고, 그 외에도 실제 임상 진단군과 정상군의 점수 분포가 가장 잘 갈리는 지점을 통계적으로 찾는 방법도 널리 쓰입니다. 절단점을 어떻게 정하느냐에 따라 같은 점수를 받은 사람도 합격/불합격, 정상/위험군이 완전히 달라질 수 있습니다.
왜 중요한가
절단점설정법은 자격시험 합격 여부, 임상 척도의 정상/위험군 판정, 선별검사의 재진 여부 등 실제 의사결정으로 직결되는 기준을 만드는 절차이기 때문에, 검사 개발과 타당화를 다루는 논문에서 신뢰도·타당도 검증만큼 비중 있게 다뤄집니다. 절단점을 어떤 방법과 근거로 정했는지가 명확하지 않으면 그 검사의 실무 활용 자체가 논쟁의 대상이 될 수 있어, 방법론의 투명한 보고가 특히 강조됩니다. 또한 절단점 설정 방식에 따라 민감도와 특이도 같은 진단적 성능 지표도 함께 달라지므로, 검사 성능을 평가하는 연구와도 밀접하게 연결됩니다.
논문에서는 이렇게 쓰입니다
이 문장은 "전문가 8명이 각 문항의 통과 확률을 판단한 값을 평균 내어, 16점을 합격과 불합격을 가르는 기준으로 정했다"는 뜻입니다.
실제로 우울증 진단을 받은 집단과 그렇지 않은 집단의 점수 분포를 비교해, 두 집단을 가장 잘 구분해내는 점수를 통계적으로 찾아냈다는 뜻이다.
시험 문항을 쉬운 것부터 어려운 것 순서로 늘어놓고, 심사위원단이 "여기까지는 합격 수준"이라고 표시한 지점을 기준 점수로 삼았다는 뜻이다.
조금 더 깊게 보면
절단점설정법은 크게 판단 중심 방법(전문가의 주관적 평정에 기반, 앤고프법·북마크법 등)과 자료 중심 방법(실제 검사 점수 분포에 기반, ROC 곡선 분석 등)으로 나뉘며, 두 접근을 함께 사용해 결과를 교차 검증하는 경우도 흔합니다. 자료 중심 방법에서는 절단점 선택에 따라 민감도(진짜 위험군을 놓치지 않는 정도)와 특이도(정상군을 오분류하지 않는 정도)가 서로 상충하는 관계를 보이므로, 어느 쪽에 더 무게를 둘지는 검사의 목적(선별 검사인지 확진 검사인지)에 따라 달라집니다. 절단점은 표본과 시점에 따라 변할 수 있어, 다른 집단이나 새로운 자료에서 재검증하는 절차도 함께 보고되는 경우가 많습니다.
주의할 점
절단점은 절대적인 진리가 아니라 특정 방법과 표본에 근거해 산출된 하나의 추정치입니다. 같은 검사라도 절단점을 어떻게 설정하느냐에 따라 차별적 문항기능 분석 결과나 선별 대상자 수가 크게 달라질 수 있으므로, 논문에서는 절단점 산출 방법과 그 근거를 반드시 함께 밝혀야 합니다.