표제어화 (Lemmatization)
한 줄 정의: 단어의 여러 굴절형이나 활용형을 하나의 기본형인 표제어(lemma)로 통합하여 처리하는 작업.
쉽게 풀면
'간다, 갔다, 갈 것이다' 같은 여러 형태의 단어를 '가다'라는 하나의 기본형으로 묶어주는 작업이에요.
논문에서는 이렇게 쓰입니다
"표제어화된 빈도 자료는 어형별 개별 빈도를 합산함으로써 어휘 항목 단위의 사용 빈도를 더 정확하게 보여준다."
표제어화가 어휘 빈도 분석의 정확성을 높이는 데 기여하는 방식을 설명하고 있다.
주의할 점
표제어화는 형태만 보고 기계적으로 묶는 어간추출(stemming)과 달리 실제 사전적 기본형을 찾는 작업이므로, 두 기법의 정교함과 결과가 다를 수 있음에 유의해야 한다.