언어모형 기반 정보검색 (Language Modeling Approach to Information Retrieval)

문헌정보학
한 줄 정의: 각 문헌으로부터 통계적 언어모형을 추정한 뒤, 주어진 질의어가 해당 문헌의 언어모형에서 생성될 확률을 계산하여 그 확률이 높은 문헌 순으로 검색 결과를 제시하는 정보검색 접근법이다.

쉽게 풀면

이 문서가 쓰는 '말투(단어 사용 패턴)'로 볼 때 검색어가 나올 확률이 얼마나 되는지를 계산해서 순위를 매기는 방법이다.

논문에서는 이렇게 쓰입니다

이 연구는 언어모형 기반 정보검색에서 발생하는 데이터 희소성 문제를 완화하기 위해 디리클레 평활화 기법을 적용하였다.

언어모형 접근법에서 흔히 나타나는 확률 추정의 희소성 문제와 이를 보완하는 평활화 기법을 언급한 문장이다.

주의할 점

질의어에 등장하지만 문헌에 없는 단어의 확률이 0이 되는 문제를 막기 위해 평활화(smoothing) 기법이 필수적으로 사용된다.

관련 용어