자료추출 서식 (Data Extraction Form)
쉽게 풀면
수십 편의 논문에서 표본크기, 효과크기, 연구설계 등 필요한 정보를 뽑아낼 때, 사람마다 다른 방식으로 정리하면 나중에 비교하고 합치기 어렵습니다. 자료추출 서식은 어떤 항목을 어떤 형식으로 기록할지 미리 표로 정해두고, 모든 연구에서 동일한 방식으로 정보를 뽑아 채워 넣게 하는 도구입니다. 보통 두 명 이상의 연구자가 독립적으로 자료를 추출한 뒤 결과를 비교해 일치도를 확인합니다. 이렇게 표준화하면 이후 메타분석이나 종합 단계에서 오류와 편향을 줄일 수 있습니다.
왜 중요한가
체계적 문헌고찰이나 메타분석은 수십에서 수백 편의 개별 연구를 종합해야 하므로, 연구자마다 자료를 다르게 정리하면 이후 결과를 비교하거나 통계적으로 통합하는 과정에서 오류나 편향이 생기기 쉽습니다. 자료추출 서식은 이런 문제를 줄이는 표준화 도구로서, 근거기반의학이나 정책 결정을 위한 근거 종합 연구에서 방법론의 신뢰도를 보여주는 핵심 요소로 다뤄집니다. 또한 두 명 이상이 독립적으로 추출한 결과를 비교하는 절차와 맞물려, 연구 전체의 재현 가능성과 투명성을 평가하는 기준이 되기도 합니다.
논문에서는 이렇게 쓰입니다
미리 만들어둔 표준 양식에 맞춰 두 사람이 각자 논문에서 정보를 뽑아내고, 두 결과가 일치하는지 서로 비교했다는 뜻입니다.
서식을 실제로 사용하기 전에 몇 편의 논문에 시범 적용해 항목이 모호하지 않은지 미리 확인하는 절차도 흔히 포함된다는 뜻입니다.
분야에 따라 기본적인 서식 구조에 그 분야 특유의 항목을 추가해 맞춤형으로 설계한다는 의미입니다.
조금 더 깊게 보면
자료추출 서식을 설계할 때는 흔히 몇 편의 논문으로 예비 검토를 거쳐 항목의 정의를 다듬고, 실제 추출 단계에서는 두 명 이상이 독립적으로 작업한 뒤 평가자간 신뢰도 지표(예: 코헨의 카파)로 일치도를 정량적으로 확인하는 경우가 많습니다. 불일치가 발견되면 원문을 다시 확인하거나 제3의 연구자가 중재하는 절차를 두기도 합니다. 논문을 읽을 때는 서식에 포함된 항목이 연구 질문에 필요한 정보를 충분히 담고 있는지, 그리고 추출자 간 불일치를 어떻게 해결했는지를 살펴보면 근거 종합의 신뢰도를 가늠할 수 있습니다.
주의할 점
자료추출 서식의 항목이 애매하게 정의되어 있으면 추출자마다 다르게 해석할 수 있으므로 항목별 정의를 명확히 사전에 규정해야 합니다.