순재분류개선 (Net Reclassification Improvement)

한 줄 정의: 새 변수를 넣었을 때 위험 범주 분류가 올바른 방향으로 얼마나 바뀌었는지 나타내는 지표입니다.

쉽게 풀면

기존 모형과 새 모형이 각각 사람들을 저·중·고위험으로 나눈다고 해 봅시다. 실제로 사건이 생긴 사람은 더 높은 범주로 옮겨가는 것이 좋고, 사건이 없던 사람은 더 낮은 범주로 옮겨가는 것이 좋습니다. 순재분류개선은 이런 올바른 이동의 비율에서 잘못된 이동의 비율을 빼서 사건군과 비사건군 각각에 대해 계산한 뒤 합칩니다.

왜 중요한가

새 생체표지자를 추가해도 AUC는 거의 오르지 않는 경우가 많아, 임상적으로 의미 있는 개선을 보여 줄 다른 지표가 필요했습니다. 심혈관 위험예측 연구를 중심으로 널리 쓰이게 되었고 지금은 예측모형의 증분 가치 논쟁에서 자주 인용됩니다.

논문에서는 이렇게 쓰입니다

"새 표지자를 추가하자 순재분류개선은 0.14로 사건군에서 주로 개선이 나타났다."

실제 사건이 발생한 사람들이 더 높은 위험 범주로 옮겨 간 덕분에 지표가 개선되었다는 뜻입니다.

조금 더 깊게 보면

범주를 미리 정해 계산하는 범주형 지표와 확률이 조금이라도 움직이면 개선으로 세는 연속형 지표가 있습니다. 연속형은 아주 작은 확률 변화까지 같은 무게로 세기 때문에 값이 부풀려지고, 모형의 보정이 나쁠 때도 양수가 나올 수 있다는 비판을 받습니다. 이런 이유로 통합판별개선지수를 함께 제시하거나 결정곡선분석을 병행하고, 위험 범주는 임상 지침에 근거해 정하도록 권고됩니다.

주의할 점

순재분류개선이 양수라고 해서 새 모형이 실제로 유용하다는 보장은 없으며, 보정이 어긋난 모형에서도 양수가 나올 수 있습니다. 판별력만 보는 AUC와도, 실제 의사결정 이득을 보는 결정곡선분석과도 목적이 다른 지표입니다.