인간수준번역 (human parity in machine translation)
쉽게 풀면
기계가 번역한 결과물이 사람이 번역한 것과 거의 구별되지 않을 정도로 좋아졌다는 주장이에요.
왜 중요한가
2018년 마이크로소프트가 중국어-영어 뉴스 번역에서 인간과 동등한 품질을 달성했다고 발표한 이래 인간수준 주장은 기계번역 연구의 목표이자 논쟁의 초점이 되었고, 이 주장의 검증 과정에서 기계번역평가 방법론 자체가 근본적으로 재검토되었습니다. 번역 산업에서는 이 주장이 포스트에디팅 단가 협상과 인간 번역가의 역할 재정의에 직접 영향을 미쳐 실무적으로도 파급이 큽니다.
논문에서는 이렇게 쓰입니다
인간수준번역 주장이 제기되었으나 평가 방법론에 대한 비판이 뒤따랐던 논쟁적 사례를 제시한다.
특정 평가 조건에서의 결과임을 전제로 이 개념이 조심스럽게 쓰이는 방식을 보여 줍니다.
조금 더 깊게 보면
토랄(Antonio Toral)과 레우벨(Samuel Läubli) 등의 재검증 연구는 문장 단위로 평가하면 동등해 보이지만 문서 단위로 평가하거나 전문 번역가가 평가하면 인간 번역이 뚜렷이 우월하다는 것을 보여, 인간수준 주장이 평가 설계의 산물임을 밝혔습니다. 참조 번역의 품질, 평가자의 전문성, 원문의 장르가 결과를 좌우하므로 '인간수준'은 특정 조건 아래의 진술로만 유효합니다. 이 논쟁은 '인간 번역'이 단일 기준이 아니라 매우 넓은 품질 범위라는 점도 드러냈습니다. 토랄과 레우벨의 재검증 연구는 문장 단위로 평가하면 인간 수준과 동등해 보이지만 문서 단위나 전문 번역가 평가에서는 인간 번역이 뚜렷이 우월하다는 것을 보여, 인간수준 주장이 평가 설계 자체의 산물일 수 있음을 드러냈다.
주의할 점
인간수준번역 주장은 대개 특정 텍스트 유형과 제한된 평가 조건에서 도출된 결과이므로, 모든 텍스트 유형과 상황에 일반화해서 받아들이면 안 된다. 참조 번역의 품질, 평가자의 전문성, 원문의 장르가 결과를 좌우하므로 '인간수준'은 특정 조건 아래의 진술로만 유효하다는 점을 놓치기 쉽다.