알트메트릭 조작 (Altmetric Gaming)

윤리·출판
한 줄 정의: SNS 언급, 공유, 다운로드 수 같은 온라인 반응 지표(알트메트릭)를 실제 연구의 영향력과 무관하게 인위적으로 부풀리는 행위입니다.

쉽게 풀면

온라인 쇼핑몰에서 가짜 계정으로 좋아요와 후기를 대량으로 달아 상품을 인기 있어 보이게 만드는 '리뷰 조작'을 떠올리면 됩니다. 대안 계량지표는 원래 논문 인용 횟수만으로는 알 수 없는 대중적 관심도를 보여주기 위해 만들어졌습니다. 그런데 저자 본인이나 대행업체가 여러 개의 가짜 SNS 계정, 봇 계정, 지인 품앗이 등을 동원해 자신의 논문을 실제보다 훨씬 더 많이 공유되고 화제가 된 것처럼 꾸미는 경우가 있습니다. 이렇게 만들어진 높은 알트메트릭 점수는 언론 보도나 채용·승진 심사에서 '주목받는 연구'라는 인상을 주어 부당한 이득으로 이어질 수 있습니다.

왜 중요한가

알트메트릭은 논문이 학술지 안에서만이 아니라 사회 전반에서 얼마나 주목받는지를 보여주는 지표로, 최근 연구 성과 평가와 대중 소통(public engagement) 논의에서 비중이 커지고 있습니다. 그런데 이 지표가 채용, 승진, 연구비 심사, 언론 노출 등 실질적 이해관계와 연결되면서, 지표 자체를 조작해 이득을 보려는 시도도 함께 늘고 있습니다. 그래서 연구윤리·학술출판 분야에서는 알트메트릭 조작을 인용 조작과 함께 '지표 게이밍(metric gaming)'이라는 더 큰 문제의 한 사례로 다루며, 평가 지표의 신뢰성을 어떻게 지킬 것인가라는 상위 논의로 이어집니다.

논문에서는 이렇게 쓰입니다

"해당 논문의 트위터 언급 대부분이 짧은 시간 안에 소수의 신규 계정에서 집중적으로 발생한 것으로 나타나, 알트메트릭 조작(altmetric gaming) 가능성이 제기되었다."

이 문장은 SNS 언급이 자연스러운 대중적 관심이 아니라, 짧은 시간에 부자연스럽게 몰린 패턴을 보여 인위적으로 만들어졌을 가능성을 지적하는 것입니다.

"공중보건 분야 사전등록 연구들을 분석한 결과, 페이스북·레딧 등에서의 공유 수가 특정 캠페인 기간에 비정상적으로 급증한 논문들이 관찰되었으며, 이는 알트메트릭 조작을 시사하는 정황으로 해석되었다."

여러 SNS 플랫폼에서 동시에, 그리고 특정 시점에 몰아서 공유가 급증하는 현상을 근거로 인위적 개입 가능성을 논의하는 예문입니다.

"본 연구는 뉴스 매체 인용 대비 SNS 언급 비율이 지나치게 높은 논문 집단을 별도로 분류하여, 이러한 불균형이 알트메트릭 조작의 간접 지표가 될 수 있는지를 탐색적으로 검토하였다."

서로 다른 알트메트릭 하위 지표(뉴스 인용 대 SNS 언급) 사이의 불균형 자체를 조작 의심 신호로 활용하는 컴퓨터과학·과학계량학(scientometrics) 분야의 접근을 보여줍니다.

조금 더 깊게 보면

알트메트릭은 트위터(X) 언급, 뉴스 보도, 블로그 포스팅, 정책 문서 인용, Mendeley 저장 수 등 서로 성격이 다른 여러 하위 지표를 합산해 만들어지는 경우가 많습니다. 그래서 조작 탐지 연구에서는 총점 하나만 보기보다, 언급이 발생한 시간대의 쏠림 정도, 계정의 생성 시기와 활동 이력, 하위 지표 간의 비정상적 불균형 같은 패턴을 함께 살펴보는 경우가 일반적입니다. 이런 접근은 인용 조작 탐지에서 쓰이는 이상 패턴 분석 방법론과도 상당 부분 맞닿아 있으며, 궁극적으로는 단일 지표에 과도하게 의존하지 않고 여러 근거를 교차 검증하려는 흐름의 일부로 이해할 수 있습니다.

주의할 점

알트메트릭 점수가 높다고 해서 그 논문의 학술적 품질이나 임팩트팩터와 h-지수가 높은 것은 아닙니다. 알트메트릭은 어디까지나 대중적 화제성을 보여줄 뿐이며, 조작 여부와 별개로 학술적 가치는 동료심사와 후속 인용을 통해 별도로 검증되어야 합니다.

관련 용어