동료심사제도 (Peer Review System)

사회과학·경제학
한 줄 정의: 연구 논문이나 연구계획서의 학술적 타당성과 질을 해당 분야 전문가들이 평가하여 출판이나 연구비 지원 여부를 결정하는 학술 검증 제도.

쉽게 풀면

학술지에 논문을 실으려면 그냥 제출한다고 바로 실리는 것이 아닙니다. 같은 분야의 다른 전문가들이 그 연구가 타당한지, 방법론에 문제는 없는지 꼼꼼히 검토하는 과정을 거칩니다. 이것이 동료심사제도입니다. 연구비를 지원할 때도 비슷한 방식으로 전문가들이 연구계획서를 평가합니다. 이 제도는 과학의 질을 지키는 핵심 장치로 여겨지지만, 심사자 확보의 어려움, 심사 지연, 편향 가능성 등의 문제도 꾸준히 지적되고 있습니다.

왜 중요한가

동료심사제도는 과학 지식이 공식적으로 학계에 받아들여지는 관문 역할을 하기 때문에, 이 제도가 얼마나 신뢰할 만하게 작동하는지는 과학 지식 생산 전체의 신뢰도와 직결된다. 재현성 위기, 논문 대량 철회, 연구비 배분의 공정성 논쟁 등 최근 학계의 주요 문제들이 결국 심사 제도의 한계와 맞닿아 있어, 과학사회학·연구정책·출판학 전반에서 제도 개선 방안을 모색하는 연구가 활발히 이뤄진다.

논문에서는 이렇게 쓰입니다

"본 연구는 동료심사제도의 성별 편향 가능성을 분석하기 위해 심사 결과와 심사자 특성 간의 상관관계를 검토하였다."

과학사회학, 연구정책 연구에서 학술 검증 시스템의 공정성과 효과성을 논의할 때 다뤄진다.

"연구비 지원 심사 과정에서 동료심사제도를 통해 선정된 과제와 탈락한 과제의 이후 연구 성과를 비교하여 심사의 예측타당도를 검토하였다."

과학정책 연구에서 심사 결과가 실제로 우수한 연구를 얼마나 잘 가려내는지를 검증했다는 뜻이다.

"의학 학술지의 심사 소요 기간과 게재율 추이를 분석하여 동료심사제도의 운영 효율성 변화를 살펴보았다."

출판학 연구에서 심사 제도가 시간이 지나며 얼마나 효율적으로 운영되고 있는지를 정량적으로 분석했다는 의미이다.

조금 더 깊게 보면

동료심사제도는 심사자와 저자의 신원 공개 범위에 따라 단일맹검, 이중맹검, 오픈 리뷰 등으로 세분되며, 어떤 방식을 택하느냐에 따라 편향의 종류와 정도가 달라진다는 연구들이 축적되어 왔다. 제도의 효과성을 평가할 때는 심사가 실제로 오류나 부정행위를 얼마나 걸러내는지, 심사 결과가 이후 논문의 인용도나 영향력을 얼마나 잘 예측하는지 등을 지표로 삼는 경우가 많다. 최근에는 사전등록(preregistration), 사후 공개 심사, 커뮤니티 기반 리뷰 등 전통적 심사 방식을 보완하거나 대체하려는 다양한 실험적 모델도 함께 논의되고 있다.

주의할 점

동료심사가 반드시 오류나 부정을 완벽히 걸러내는 것은 아니며, 심사자의 주관과 학계 내 권력 관계가 개입될 수 있다는 한계가 있다.

관련 용어