기계번역평가 (machine translation evaluation)
한 줄 정의: 기계번역 시스템이 산출한 번역의 품질을 측정하는 활동으로, BLEU와 같은 자동 지표를 사용하는 자동평가와 인간 평가자가 직접 유창성·충실성을 판정하는 인간평가로 크게 구분된다.
쉽게 풀면
기계가 번역한 결과가 얼마나 잘 되었는지 점수를 매기고 판단하는 활동이에요. 컴퓨터로 자동으로 하기도 하고, 사람이 직접 평가하기도 해요.
논문에서는 이렇게 쓰입니다
"자동 지표만으로는 번역의 자연스러움을 완전히 포착할 수 없어, 이 연구에서는 인간 평가자의 유창성·충실성 평가를 병행하는 기계번역평가를 실시하였다."
자동평가의 한계를 보완하기 위해 인간평가를 병행하는 연구 방법을 설명한다.
주의할 점
기계번역평가는 평가 목적(연구용, 상용 시스템 비교 등)에 따라 적절한 평가 지표와 방법이 달라지므로, 단일 지표에만 의존하지 않는 것이 바람직하다.