연구자 삼각검증 (investigator triangulation)

한 줄 정의: 두 명 이상의 연구자가 같은 자료를 독립적으로 분석한 뒤 결과를 비교해서 한 사람의 편견이나 실수를 걸러내는 방법입니다.

쉽게 풀면

시험 채점을 한 명의 선생님만 하면 그 선생님의 기준이나 그날의 컨디션에 따라 점수가 달라질 수 있습니다. 그래서 중요한 시험은 여러 명의 채점관이 각자 채점한 뒤 점수를 맞춰봅니다. 연구자 삼각검증도 똑같은 원리입니다. 인터뷰나 관찰로 모은 자료를 연구자 한 명이 혼자 해석하면 그 사람의 생각이나 선입견이 은연중에 결과에 섞여 들어갈 수 있습니다. 그래서 두 명 이상의 연구자가 같은 자료를 각자 따로 읽고 분석한 다음, 서로의 해석을 비교해서 "왜 이 부분은 다르게 봤을까"를 논의하고 합의점을 찾습니다. 이 과정을 거치면 한 사람의 주관적인 시각에만 의존한 결론을 피할 수 있습니다.

왜 중요한가

질적연구는 연구자의 해석이 분석 과정에 직접 개입하기 때문에, 결과의 신뢰성을 어떻게 확보했는지를 밝히는 것이 논문 심사에서 중요하게 다뤄집니다. 연구자 삼각검증은 이러한 질적연구의 엄밀성(rigor)과 신뢰성(trustworthiness)을 뒷받침하는 대표적인 방법으로, 근거이론, 현상학적 연구, 사례연구 등 다양한 질적연구 방법론 논문에서 분석 절차를 정당화할 때 자주 언급됩니다.

논문에서는 이렇게 쓰입니다

"연구자 삼각검증을 확보하기 위해 두 명의 연구자가 독립적으로 코딩을 수행한 뒤 불일치하는 부분을 논의를 통해 합의하였다."

이 문장은 "분석의 신뢰도를 높이기 위해 한 사람이 아니라 여러 연구자가 각자 자료를 분석하고, 의견이 갈리는 부분은 토론으로 맞춰갔다"는 뜻입니다.

"서로 다른 학문적 배경을 가진 세 명의 연구자가 초점집단면담 전사자료를 각각 분석함으로써 연구자 삼각검증을 실행하였다."

간호학, 사회복지학 등 배경이 다른 연구자들을 일부러 섞어 팀을 구성해, 한 분야의 관점에만 치우치지 않도록 자료를 분석했다는 의미로, 보건·복지 분야 질적연구에서 자주 쓰이는 표현이다.

"연구자 간 해석의 차이는 감사일지(audit trail)에 기록하여 분석 과정의 투명성을 높였다."

연구자 삼각검증 과정에서 의견이 갈렸던 부분과 합의에 이른 과정을 기록으로 남겨, 나중에 제3자가 분석 절차를 검토할 수 있도록 했다는 뜻으로, 교육학·경영학 질적연구에서도 흔히 쓰이는 문장이다.

조금 더 깊게 보면

연구자 삼각검증을 실제로 보고할 때는 단순히 "여러 연구자가 참여했다"는 서술에 그치지 않고, 코더 간 일치도(inter-coder agreement)를 함께 제시하는 경우도 있습니다. 다만 질적연구에서는 일치율 수치 자체보다, 불일치가 발생한 지점을 논의하며 합의된 코딩체계(codebook)를 다듬어가는 과정을 더 중요하게 여기는 경향이 있습니다. 이런 점에서 연구자 삼각검증은 단순한 통계적 신뢰도 확인이 아니라, 해석의 다양성을 통해 자료를 더 풍부하게 이해하기 위한 절차로 이해하는 것이 적절합니다.

주의할 점

연구자 삼각검증은 두 사람이 처음부터 똑같은 결과를 내야 성공이라는 뜻이 아닙니다. 오히려 서로 다르게 해석한 부분을 찾아내 그 차이가 왜 생겼는지 논의하는 과정 자체가 자료를 더 깊이 이해하게 해주는 핵심입니다. 이는 평가자 간에 점수가 얼마나 일치하는지를 수치로 계산하는 삼각검증의 다른 하위 유형들과 목적은 같지만 방식은 다르므로 구분해서 이해해야 합니다.