정규화할인누적이득 (Normalized Discounted Cumulative Gain (NDCG))
한 줄 정의: 검색 결과의 각 문헌에 부여된 다단계 관련성 등급을 누적하되 순위가 낮을수록 이득 값을 할인하여 합산한 후, 이상적인 순위 배열의 값으로 정규화한 정보검색 평가지표이다.
쉽게 풀면
관련성이 높은 자료일수록, 그리고 검색결과 상단에 나올수록 더 높은 점수를 주는 방식으로, '완벽한 순서'와 비교해 몇 점인지 계산하는 지표이다.
논문에서는 이렇게 쓰입니다
다단계 관련성 척도를 사용한 이용자 실험에서 제안 모형은 기존 모형 대비 NDCG@10에서 유의한 개선을 보였다.
이진 관련성이 아닌 다단계 관련성 척도를 사용할 때 NDCG가 적합한 평가지표로 채택된 사례를 설명하는 문장이다.
주의할 점
NDCG는 관련성 등급을 여러 단계로 부여해야 하므로 관련성판단 비용이 이진 판단 방식보다 높다는 점에 유의해야 한다.