동료심사 (Peer Review)
쉽게 풀면
학술지에 논문을 내면, 저자와 이해관계가 없는 같은 분야의 다른 전문가 몇 명이 그 논문을 미리 읽고 "연구 방법이 타당한가, 결론이 데이터로 뒷받침되는가, 새로운 기여가 있는가"를 꼼꼼히 검토합니다. 이 과정을 통과해야 비로소 논문이 정식으로 출판됩니다. 마치 요리사가 손님에게 음식을 내기 전에 다른 셰프에게 미리 맛을 보게 해서 문제를 짚어내는 것과 비슷한 품질 관리 절차입니다.
왜 중요한가
동료심사는 학술 지식이 공적으로 인정되기 위한 최소한의 관문 역할을 합니다. 심사를 거치지 않은 주장과 거친 주장을 구분하는 기준이 되기 때문에, 연구비 지원 심사, 임용·승진 평가, 인용 관행 등 학계 전반의 신뢰 체계가 이 절차 위에 세워져 있습니다. 최근에는 프리프린트 확산과 심사 지연 문제로 동료심사 제도 자체를 개선하려는 논의(오픈 리뷰, 심사자 익명성 완화 등)도 활발히 이루어지고 있습니다.
어떤 절차인가
동료심사(peer review)는 학술지가 논문을 싣기 전에 같은 분야의 전문가(심사자)에게 의견을 구하는 절차입니다. 학술지마다 다르지만 대체로 다음 순서로 진행됩니다.
- 투고 → 편집자의 1차 검토(범위·형식·명백한 결함으로 반려 가능)
- 심사자 선정(보통 2~3명) → 심사 의견서 작성
- 편집자 결정: 게재, 소폭 수정 후 게재, 대폭 수정, 게재 불가
- 수정 원고와 “심사 의견에 대한 답변서” 제출 → 재심사 → 최종 결정
심사자와 저자가 서로를 아는지에 따라 단일맹검(심사자만 저자를 앎), 이중맹검(맹검 심사), 심사 과정을 공개하는 공개 심사 등이 있습니다.
언제 쓰고 무엇을 얻나
동료심사의 기대 효과는 방법론적 결함과 과장된 결론을 걸러 내고, 원고를 개선시키는 것입니다. 하지만 이 효과가 얼마나 큰지는 여전히 연구되는 주제입니다. 생의학 분야의 체계적 문헌 고찰(Jefferson 외, 2007)은 편집 심사가 보고서의 질을 높이는지에 대한 근거가 제한적이라고 정리했고, Smith(2006)는 동료심사를 “결함이 있는 과정”이라 비판하면서도 대안이 마땅치 않다는 점을 짚었습니다.
- 얻는 것: 최소한의 외부 검토를 거쳤다는 신호, 저자에게 주는 개선 의견
- 얻지 못하는 것: 결론이 옳다는 보증. 심사자가 자료 원본을 다시 분석하지 않는 경우가 많고 오류를 놓칠 수 있습니다.
- 출판 이후에도 재현성 검증과 철회가 이어집니다.
논문에는 이렇게 적는다
연구에서 동료심사를 언급할 때는 다음처럼 구체적으로 적습니다.
- 문헌 검색 기준: “동료심사를 거친 학술지 논문만 포함하였다.” 이때 프리프린트나 학위논문의 포함 여부도 밝힙니다.
- 한계: 동료심사를 통과했더라도 출판편향이 있을 수 있어 포함 논문의 질을 별도로 평가했다고 적습니다.
- 본인의 논문 투고 절차를 서술할 때는 심사 방식(단일/이중맹검)과 수정 과정을 구분해 적습니다.
논문에서는 이렇게 쓰입니다
실제 논문에서
국내 학술지 논문에서 이 용어가 쓰인 문장을 그대로 옮겼습니다. 제목·학술지·연도와 원문 링크를 함께 적었습니다.
“연구결과, 국내 연구자들은 데이터에 대한 설명제공, 데이터로의 안정적 접근, 인용, 동료심사를 통한 품질확인을 데이터 저널의 장점으로 인식하였으나, 연구실적으로써의 데이터 논문 인정에는 낮은 인식수준을 보였다.”
과학기술분야 연구자들의 데이터 출판경험 및 인식 연구, 한국도서관·정보학회지, 2023 · KCI 한국학술지인용색인 · 원문 보기 ↗
“그리고 기록학 분야의 양대 학술지로 지칭되는 기록학연구와 한국기록관리학회지에 2007년부터 2016년까지 게재된 481편의 동료평가된 국내 연구논문을 검토하여 80편의 실증연구를 선별하였다.”
국내 기록학 연구방법 동향분석 (1): 설문과 실험연구를 중심으로, 기록학연구, 2017 · KCI 한국학술지인용색인 · 원문 보기 ↗
“부차적으로 집단별로 학술지 선정요인 지표변수에 대한 인식을 살펴본 결과, 두 집단 모두 동료평가와 주요 색인 데이터베이스 등재 여부를 중요시하는 것으로 나타났다.”
문헌정보학 및 사회과학 분야 연구자의 학술지 선정요인에 대한 측정 동일성 검증, 한국도서관·정보학회지, 2021 · KCI 한국학술지인용색인 · 원문 보기 ↗
예시 문장
아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.
전문가들의 검토를 거쳐 출판된 논문이라는 뜻으로, 어느 정도의 품질 검증을 통과했다는 신뢰의 표시로 언급됩니다.
저자와 심사자가 서로의 신원을 모르는 상태에서 심사가 이루어졌다는 뜻으로, 심사 과정의 공정성을 강조할 때 쓰입니다.
정식 심사가 끝나기 전 단계의 초기 공개라는 점을 명시함으로써, 아직 검증이 완료되지 않은 결과임을 독자에게 알리는 표현입니다.
조금 더 깊게 보면
동료심사에는 심사자가 저자를 알 수 있는 단일맹검(single-blind), 서로 모르는 이중맹검(double-blind), 심사자 실명과 심사 내용을 함께 공개하는 오픈 리뷰(open review) 등 여러 방식이 있으며, 학술지마다 채택하는 방식이 다릅니다. 또한 대체로 두세 명의 심사자가 방법론의 타당성, 통계 처리, 기존 문헌과의 정합성 등을 항목별로 평가하고, 그 결과를 바탕으로 편집자가 게재·수정·거절을 결정하는 구조로 운영됩니다.
주의할 점
동료심사를 통과했다고 해서 그 논문의 결론이 항상 옳은 것은 아닙니다. 심사자도 사람이라 오류를 놓칠 수 있고, 출판 이후에 다른 연구자들의 재현 시도나 반박을 통해 결과가 뒤집히는 경우도 있습니다. 또한 유의한 결과가 나온 연구가 더 잘 통과되는 경향이 있어 출판편향과도 관련이 있습니다.
헷갈리기 쉬운 용어
한국어 “동료평가”는 서로 다른 두 가지 뜻으로 쓰여서 헷갈립니다.
| 용어 | 무엇을 평가하나 | 시점·상황 |
|---|---|---|
| 동료심사 (peer review) | 연구 논문의 질과 타당성 | 학술지 게재 전 심사 |
| 동료평가 (교육 현장) | 학습자가 서로의 과제·수행을 평가 | 수업, 팀 활동 |
| 출판 후 심사 | 이미 공개된 논문에 대한 논평·비평 | 게재 이후 |
| 프리프린트 | 심사 전에 공개한 원고 | 게재 전 공개 |
참고 문헌
- Kelly, J., Sadeghieh, T., & Adeli, K. (2014). Peer review in scientific publications: benefits, critiques, & a survival guide. EJIFCC, 25(3), 227–243.
- Jefferson, T., Rudin, M., Brodney Folse, S., & Davidoff, F. (2007). Editorial peer review for improving the quality of reports of biomedical studies. Cochrane Database of Systematic Reviews, MR000016.
- Smith, R. (2006). Peer review: a flawed process at the heart of science and journals. Journal of the Royal Society of Medicine, 99(4), 178–182.
표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.