참신성 편향 (Novelty Bias)
쉽게 풀면
뉴스에서 "이미 알려진 사실이 다시 확인됐다"는 기사보다 "놀라운 신물질 발견"이라는 기사가 훨씬 눈길을 끄는 것과 비슷합니다. 학술지 편집자와 심사위원도 사람이기 때문에, 이미 다른 연구자가 밝힌 결과를 그대로 재확인한 논문보다는 "이전에 없던 새로운 발견"을 담은 논문에 더 끌립니다. 문제는 과학이 원래 같은 결과가 여러 번 반복해서 나와야 비로소 믿을 만하다고 인정받는 학문이라는 점입니다. 참신성만 우대하다 보면 정작 중요한 반복검증 연구는 어디에도 실리지 못해 묻히고, 우연히 한 번 나온 화려한 결과가 검증 없이 정설처럼 퍼지는 부작용이 생깁니다.
왜 중요한가
참신성 편향은 학술지가 어떤 연구를 게재할지 결정하는 심사 과정 전반에 영향을 미치기 때문에, 과학의 자기수정 기능과 재현성 위기를 논하는 메타과학(meta-science) 연구에서 핵심적으로 다루어지는 주제입니다. 반복검증 연구가 체계적으로 저평가되면 잘못된 초기 결과가 정정되지 못한 채 학계에 남아 후속 연구의 방향을 왜곡할 수 있어, 연구 방법론과 학술 출판 시스템 개혁 논의에서 자주 인용됩니다.
논문에서는 이렇게 쓰입니다
이 문장처럼 반복검증 연구는 학문적으로 매우 중요함에도 불구하고 새롭지 않다는 이유만으로 저평가되는 경우가 흔합니다.
심리학 분야의 재현성 프로젝트 결과를 통해 참신성 편향이 실제 게재율 격차로 나타난 사례를 보여주는 예문입니다.
의학 분야에서도 반복검증 연구가 참신성 편향의 영향을 받는다는 것을 보여주는 예문입니다.
조금 더 깊게 보면
참신성 편향에 대응하기 위해 최근 학계에서는 연구 결과가 나오기 전에 가설과 분석 계획을 먼저 심사받는 등록보고서(registered reports) 제도나, 반복검증 논문만을 다루는 전용 학술지·섹션을 마련하는 시도가 이루어지고 있습니다. 또한 메타분석 연구에서는 특정 결과가 참신성 편향으로 인해 과대 대표되어 있는지를 살펴보기 위해 깔때기 그림(funnel plot) 같은 방법으로 출판된 연구들의 분포를 점검하기도 합니다.
주의할 점
참신성 편향은 출판편향과 자주 혼동되지만 서로 초점이 다릅니다. 출판편향은 주로 "유의한 결과냐 아니냐"에 관한 것이고, 참신성 편향은 "새로운 주장이냐 기존 주장의 반복이냐"에 관한 것입니다. 두 편향이 겹치면 새롭고 유의한(그러나 검증되지 않은) 결과만 학계에 넘쳐나는 왜곡이 심해질 수 있습니다.