본하논의 가짜 논문 실험 (Bohannon's Sting Operation)

한 줄 정의: 2013년 과학 저널리스트 존 본하논이 결함투성이 가짜 논문을 304개 오픈액세스 학술지에 투고해 절반 이상이 이를 통과시킨 것을 밝혀낸 잠입 실험입니다.

쉽게 풀면

식품 위생 점검원이 신분을 숨기고 손님인 척 식당에 가서 실제로 위생 상태를 확인하는 것처럼, 본하논은 가짜 연구자와 가짜 소속 기관을 만들어낸 뒤 누가 봐도 통계와 방법론에 구멍이 숭숭 뚫린 암 치료 논문을 작성했습니다. 그리고 이 논문을 전 세계 304개 오픈액세스 학술지에 투고했습니다. 결과는 충격적이었습니다. 절반이 넘는 학술지가 아무런 문제 제기 없이 논문을 그대로 게재 승인했습니다. 이 실험은 오픈액세스 학술지 전체를 비판하려는 목적이 아니라, "게재료를 받는 학술지 중 상당수가 제대로 된 동료심사를 거치지 않는다"는 사실을 구체적인 숫자로 보여준 사건으로 학술출판계에 큰 파장을 일으켰습니다.

왜 중요한가

이 실험은 동료심사가 논문의 질을 보증한다는 학계의 오랜 전제를 정면으로 흔든 사례이기 때문에, 학술출판·연구윤리 분야 논문에서 반복적으로 인용됩니다. 오픈액세스 확산과 게재료(APC) 기반 출판 모델이 성장하던 시기에 나온 실증적 증거였기 때문에, 이후 약탈적 학술지 판별 기준, 동료심사 개혁, 연구 무결성 정책 논의의 출발점 역할을 했습니다. 또한 연구자·기관이 학술지의 신뢰도를 어떻게 평가할지에 대한 실무적 논의(체크리스트, 화이트리스트 도입 등)로도 이어졌습니다.

논문에서는 이렇게 쓰입니다

"본하논(2013)의 실험은 동료심사 과정이 학술지의 품질을 보장하는 절대적 장치가 아님을 실증적으로 드러냈으며, 이는 이후 약탈적 학술지 판별 기준 마련의 계기가 되었다."

이 문장은 이 실험이 단순한 해프닝이 아니라, 학술지 심사 신뢰성 문제를 학계가 진지하게 다루게 만든 실증적 근거로 인용되고 있음을 보여줍니다.

"도서관정보학 분야에서는 본하논의 스팅 오퍼레이션 이후 기관 차원의 오픈액세스 학술지 신뢰도 평가 지침을 마련하려는 시도가 이어졌으나, 평가 기준의 표준화는 여전히 과제로 남아 있다."

이 예문은 실험 결과가 개별 연구자의 경각심을 넘어, 도서관·연구지원 부서 같은 기관 단위의 정책 대응으로까지 확장되었음을 보여줍니다.

"생명과학 연구자들 사이에서 본하논 실험은 게재료 지불 여부와 논문 심사 엄격성 사이의 상관관계를 의심하게 만든 계기로 자주 언급되며, 이는 연구자가 투고 학술지를 선택할 때 참고하는 실무적 판단 기준에도 영향을 미쳤다."

이 예문은 실험이 학술출판 정책 논의에 그치지 않고, 개별 연구자가 투고할 학술지를 고르는 실무적 의사결정에도 영향을 준 사례로 인용됨을 보여줍니다.

조금 더 깊게 보면

본하논의 실험은 하나의 가짜 논문을 여러 학술지에 동시다발적으로 투고하는 방식이었기 때문에, 개별 학술지의 심사 품질을 정밀하게 통제된 조건에서 비교한 연구라기보다는 특정 시점의 오픈액세스 생태계 전반의 취약성을 드러낸 사례 연구에 가깝습니다. 이 때문에 이후 논문들은 이 실험을 인용할 때 표본이 오픈액세스 학술지에 편중되었다는 방법론적 한계를 함께 언급하는 경우가 많습니다. 관련해서 논문을 읽을 때 함께 마주치게 되는 개념으로는 약탈적 학술지를 걸러내기 위한 화이트리스트·블랙리스트 방식의 빌의 목록, 그리고 심사 과정 자체가 형식적으로만 이루어지는 가짜 동료심사 문제가 있습니다. 이러한 개념들은 서로 겹치면서도 구분되는 지점이 있으므로, 인용 맥락에 따라 어떤 개념을 가리키는지 주의해서 읽을 필요가 있습니다.

주의할 점

이 실험은 오픈액세스 학술지만을 대상으로 했기 때문에, 구독형 학술지는 문제가 없다는 뜻으로 오해해서는 안 됩니다. 게재료를 받고 심사가 부실한 학술지는 약탈적 학술지라는 별도의 개념으로 분류되며, 본하논의 실험은 그런 학술지가 실제로 얼마나 광범위하게 존재하는지를 드러낸 하나의 사례로 이해해야 합니다.