재현율 (Recall)

문헌정보학
한 줄 정의: 검색시스템이 검색해 낸 관련 문헌의 수를 컬렉션 내 전체 관련 문헌의 수로 나눈 비율로, 관련 문헌을 얼마나 빠짐없이 찾아냈는지를 나타내는 정보검색 성능 평가지표이다.

쉽게 풀면

찾아야 할 관련 자료 중에서 실제로 몇 퍼센트를 찾아냈는지를 보여주는 지표이다. 도서관 서가 전체에 관련 자료가 100권 숨어 있는데 검색 결과로 80권만 나왔다면, 재현율은 80%가 된다. 얼마나 놓치지 않고 빠짐없이 건져 올렸는지를 보여주는 그물망의 촘촘함 같은 지표라고 보면 된다.

왜 중요한가

정밀률과 짝을 이루는 정보검색 성능 평가지표로, 특히 특허검색이나 법률검색처럼 관련 문헌을 빠짐없이 찾는 것이 중요한 분야에서 핵심 평가 기준으로 다뤄집니다. 특허 침해 여부를 판단하거나 판례를 조사할 때 단 하나의 관련 문헌이라도 놓치면 큰 손해로 이어질 수 있어, 이런 분야의 검색시스템 설계와 평가에서 특히 중요하게 다뤄집니다. 특허 선행기술조사나 체계적 문헌고찰처럼 누락이 치명적인 검색 과업에서는 재현율이 정확률보다 우선시된다.

계산과 범위

재현율 = 검색된 관련 문헌 수 ÷ 컬렉션 전체의 관련 문헌 수 (분류 문제에서는 TP ÷ (TP + FN))

해석 기준

재현율은 정밀률과 함께 읽어야 합니다. 둘은 보통 상충합니다(van Rijsbergen 1979; Manning 외 2008).

예 (가상의 예, 코드로 계산). 컬렉션에 관련 문헌이 120건 있습니다. 시스템 A는 50건을 내놓았고 40건이 관련 문헌입니다. 시스템 B는 400건을 내놓았고 100건이 관련 문헌입니다.

시스템정밀률재현율F1
A40/50 = 0.80040/120 ≈ 0.333≈ 0.471
B100/400 = 0.250100/120 ≈ 0.833≈ 0.385

B는 재현율이 높지만 정밀률이 낮고, A는 그 반대입니다. 극단적으로 컬렉션 전체를 결과로 내면 재현율은 1이 되지만 정밀률은 관련 문헌 비율까지 떨어져 의미가 없습니다. 특허 선행기술 조사나 체계적 문헌고찰처럼 누락이 치명적인 과업에서는 재현율에 무게를 두고, 사용자가 상위 몇 건만 보는 검색에서는 정밀률이 더 중요합니다. 양성이 드문 불균형 자료에서는 정밀도-재현율 곡선이 ROC 곡선보다 성능 차이를 더 잘 드러낸다는 보고가 있습니다(Saito & Rehmsmeier 2015).

보고 방법

논문에서는 이렇게 쓰입니다

실제 논문에서

이 용어를 직접 쓴 국내 논문 문장을 아직 수집하지 못했습니다. 수집되는 대로 출처와 함께 싣겠습니다.

예시 문장

아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.

실험 결과 제안된 질의확장 기법이 기존 시스템 대비 재현율을 12%p 향상시킨 것으로 나타났다.

질의확장 같은 기법 적용 전후의 재현율 수치를 비교하여 성능 개선을 입증하는 전형적인 실험 결과 서술이다.

본 연구는 동의어링을 검색시스템에 추가한 결과 재현율은 상승했으나 정밀률은 소폭 하락했다고 보고하였다.

재현율을 높이는 조치가 정밀률과 상충관계에 있을 수 있음을 실험으로 보여준 문장이다.

조금 더 깊게 보면

전체 관련 문헌의 수를 정확히 알기 어려운 대규모 컬렉션에서는 재현율을 정확히 계산하는 것 자체가 현실적으로 어려워, 풀링기법 같은 근사적 방법이 대신 사용되는 경우가 많습니다. 재현율은 흔히 정밀률과 함께 계산되어 F-측정치라는 하나의 값으로 종합되며, 검색결과 개수를 제한한 재현율@k 같은 변형 지표도 함께 쓰인다.

재현율은 전체 관련문헌 중 실제로 검색된 비율을 뜻하며, 분모가 되는 전체 관련문헌 집합의 크기를 정확히 알기 어려운 대규모 컬렉션에서는 추정치에 의존해 계산할 수밖에 없다. 재현율을 극단적으로 높이려면 검색식을 넓히면 되지만, 이는 흔히 정확률의 저하를 동반한다는 상충 관계가 있다.

주의할 점

재현율만을 높이려 하면 관련 없는 문헌까지 대량으로 검색되어 정밀률이 낮아질 수 있으므로 두 지표를 함께 고려해야 한다. 재현율 100%를 달성하는 가장 손쉬운 방법은 컬렉션의 모든 문헌을 결과로 내놓는 것이지만, 이는 실질적으로 아무 의미가 없는 결과라는 점도 함께 이해해야 한다.

헷갈리기 쉬운 용어

검색·분류 평가 지표는 같은 혼동행렬에서 서로 다른 칸을 나눈 값입니다.

용어계산묻는 질문
재현율TP ÷ (TP + FN)찾아야 할 것 중 몇 개를 찾았나
정밀률TP ÷ (TP + FP)찾았다고 한 것 중 몇 개가 맞나
F1 점수정밀도와 재현율의 조화평균두 값을 한 숫자로 요약하면
혼동행렬TP·FP·FN·TN의 표위 지표들의 원자료

참고 문헌

  1. Kent, A., Berry, M. M., Luehrs, F. U., Jr., & Perry, J. W. (1955). Machine literature searching VIII. Operational criteria for designing information retrieval systems. American Documentation, 6(2), 93–101.
  2. van Rijsbergen, C. J. (1979). Information Retrieval (2nd ed.). Butterworths.
  3. Manning, C. D., Raghavan, P., & Schütze, H. (2008). Introduction to Information Retrieval. Cambridge University Press.
  4. Saito, T., & Rehmsmeier, M. (2015). The precision-recall plot is more informative than the ROC plot when evaluating binary classifiers on imbalanced datasets. PLoS ONE, 10(3), e0118432.

표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.