질적연구 신뢰성 확보 기준 (trustworthiness)
쉽게 풀면
양적연구에는 신뢰도와 타당도라는 익숙한 잣대가 있지만, 통계적 반복측정이 불가능한 질적연구에는 그와 다른 잣대가 필요합니다. 링컨과 구바(Lincoln & Guba)는 이를 위해 네 가지 기준을 제안했습니다.
신빙성은 연구자가 참여자의 현실을 제대로 포착했는가(양적연구의 내적타당도에 대응), 전이가능성은 그 결과를 다른 맥락에도 적용해볼 만한가(외적타당도에 대응), 의존가능성은 같은 자료와 절차라면 다른 연구자도 비슷한 결론에 도달할 수 있는가(신뢰도에 대응), 확인가능성은 결론이 연구자의 개인적 편견이 아니라 자료에 근거하고 있는가(객관성에 대응)를 뜻합니다.
삼각검증, 동료 검토, 두꺼운 기술 같은 구체적인 방법들이 이 네 기준을 충족시키는 도구로 쓰입니다.
왜 중요한가
질적연구는 통계적 검정 없이 해석을 통해 결론에 도달하기 때문에, 그 결론이 자의적이지 않다는 것을 보여줄 별도의 장치가 필요합니다. trustworthiness는 간호학, 교육학, 상담학, 조직연구 등 질적방법을 주로 쓰는 분야에서 연구의 학술적 정당성을 확보하는 핵심 근거로 다뤄집니다. 심사자 입장에서는 이 네 기준의 충족 여부가 곧 논문 채택 여부를 가르는 실질적 잣대가 되기도 합니다.
핵심 정리
- 질적연구는 통계적 검정으로 결과를 확인하기 어렵기 때문에, 신뢰도·타당도 대신 연구가 믿을 만한가를 따지는 별도의 기준이 필요하다는 주장이 나왔습니다. Lincoln과 Guba(1985)는 이를 trustworthiness라 부르고 네 기준을 제안했으며, 이 용어는 Guba(1981)에서 먼저 정리되었습니다.
- 네 기준은 양적연구의 기준에 대응하도록 이름 붙여졌고, 보통 짝이 되는 절차가 함께 제시됩니다.
| 기준 | 묻는 질문 | 양적연구의 대응 | 대표 절차 |
|---|---|---|---|
| 신빙성 | 참여자의 현실을 제대로 담았나 | 내적타당도 | 장기 참여, 삼각검증, 멤버체킹, 동료검토, 부정 사례 탐색 |
| 전이가능성 | 다른 맥락에서 쓸 만한가 | 외적타당도 | 두꺼운 기술, 목적표집의 명시 |
| 의존가능성 | 절차가 일관되고 추적 가능한가 | 신뢰도 | 감사추적, 절차 기록, 코더 간 비교 |
| 확인가능성 | 결론이 자료에서 나왔나 | 객관성 | 감사추적, 성찰일지, 연구자 위치성 서술 |
- Guba와 Lincoln(1989)은 여기에 진정성(authenticity) 기준을 더했습니다.
예시로 보기
가상의 연구 방법 절에서 기준과 절차가 어떻게 짝지어 쓰이는지 봅니다.
| 방법 절의 문장(가상) | 대응하는 기준 |
|---|---|
| “면담과 현장 관찰, 내부 문서를 비교하였다.” | 신빙성(삼각검증) |
| “분석 결과를 참여자 4명에게 보여 해석이 경험과 맞는지 확인받았다.” | 신빙성(멤버체킹) |
| “참여자의 배경과 연구 맥락을 자세히 기술하였다.” | 전이가능성(두꺼운 기술) |
| “코딩 결정과 코드 변경 이유를 날짜별로 기록해 두었다.” | 의존가능성·확인가능성(감사추적) |
| “연구자의 경력과 연구 주제에 대한 선입견을 성찰일지에 기록하였다.” | 확인가능성(성찰, 위치성) |
읽는 요령은 기준 이름보다 실제로 한 절차가 무엇이고 얼마나 구체적으로 적혀 있는가를 보는 것입니다. “신뢰성을 확보하였다”는 한 문장만 있고 절차가 없으면 근거가 부족합니다.
자주 하는 오해
| 오해 | 바로잡기 |
|---|---|
| 질적연구이므로 신뢰성은 따로 증명하지 않아도 된다. | 해석 중심 연구라서 오히려 해석이 자료에 근거하는지 보여 줄 장치가 필요합니다. 절차를 실제로 수행하고 보고해야 합니다. |
| 네 기준을 모두 한 가지 절차로 충족할 수 있다. | 기준마다 필요한 절차가 다릅니다. 멤버체킹만으로 전이가능성이나 의존가능성이 확보되지는 않습니다. |
| 멤버체킹으로 참여자가 동의하면 해석이 옳다. | 참여자가 자신의 이야기를 알아본다는 것과 연구자의 분석적 해석이 타당하다는 것은 다릅니다. 확인 방식에 따라 결과가 달라질 수 있습니다. |
| trustworthiness는 양적연구의 신뢰도(reliability)를 번역한 말이다. | 우리말 ‘신뢰성’이 비슷하게 들리지만, reliability(신뢰도)는 측정의 일관성이고 trustworthiness는 연구 전체가 믿을 만한가를 다루는 상위 개념입니다. |
| Lincoln과 Guba의 기준이 유일한 틀이다. | Tracy(2010)의 ‘대형 텐트’ 여덟 기준처럼 다른 틀도 쓰이며, 연구 전통에 따라 어떤 틀이 맞는지 다릅니다. |
논문에서는 이렇게 쓰입니다
실제 논문에서
이 용어를 직접 쓴 국내 논문 문장을 아직 수집하지 못했습니다. 수집되는 대로 출처와 함께 싣겠습니다.
예시 문장
아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.
이 문장은 "질적연구 결과가 그럴듯한 인상에 그치지 않도록, 자료 수집과 분석 과정 전반에서 결과를 믿을 수 있게 만드는 여러 절차를 밟았다"는 뜻입니다. 심사자나 독자가 결과를 신뢰할 수 있는지는 이 네 기준을 얼마나 구체적으로 충족했는지에 달려 있습니다.
간호학이나 상담학 논문에서 흔히 보이는 표현으로, 분석자의 주관이 결과를 좌우하지 않았음을 보여주기 위해 여러 연구자가 함께 자료를 검토했다는 뜻입니다.
교육학 질적연구에서 자주 쓰이는 문장으로, 연구자가 자신의 배경과 관점이 해석에 미치는 영향을 스스로 점검했다는 의미입니다.
조금 더 깊게 보면
실제 논문에서는 이 네 기준이 각각 특정 절차와 짝지어 언급되는 경우가 많습니다.
신빙성은 삼각검증(triangulation)과 구성원 확인, 전이가능성은 두꺼운 기술(thick description), 의존가능성은 감사 추적(audit trail)이나 다중 코더 간 일치도 확인, 확인가능성은 성찰일지(reflexive journal)와 연구자 위치성(positionality) 서술과 함께 제시되는 식입니다.
최근에는 Lincoln과 Guba의 네 기준 외에도 진정성(authenticity) 같은 확장 기준이 함께 논의되기도 하므로, 어떤 절차가 어떤 기준을 뒷받침하는지 짝을 맞춰 읽는 것이 논문을 이해하는 데 도움이 됩니다.
주의할 점
이 네 기준은 멤버체킹이나 동료 검토처럼 구체적인 절차를 실제로 수행하고 그 과정을 논문에 명시해야 인정받을 수 있으며, "질적연구이므로 신뢰성이 있다"는 식으로 이름만 언급하는 것은 충분하지 않습니다.
헷갈리기 쉬운 용어
‘신뢰’와 ‘타당’이 들어간 말이 많아 섞이기 쉽습니다.
| 용어 | 한 줄 설명 | 주로 쓰는 연구 |
|---|---|---|
| trustworthiness(신뢰성 확보 기준) | 질적연구 전체가 믿을 만한지 판단하는 기준 묶음 | 질적연구 |
| 신뢰도 | 측정을 반복했을 때 결과가 일관된 정도 | 양적연구, 측정 도구 |
| 타당도 | 측정이나 추론이 의도한 것을 제대로 반영하는 정도 | 양적연구, 일부 질적연구 문헌 |
| 신빙성 | trustworthiness 네 기준 중 하나. 참여자의 현실을 제대로 담았는가 | 질적연구 |
참고 문헌
- Lincoln, Y. S., & Guba, E. G. (1985). Naturalistic Inquiry. Sage.
- Guba, E. G. (1981). Criteria for assessing the trustworthiness of naturalistic inquiries. Educational Communication and Technology Journal, 29(2), 75–91.
- Guba, E. G., & Lincoln, Y. S. (1989). Fourth Generation Evaluation. Sage.
- Shenton, A. K. (2004). Strategies for ensuring trustworthiness in qualitative research projects. Education for Information, 22(2), 63–75.
- Tracy, S. J. (2010). Qualitative quality: Eight “big-tent” criteria for excellent qualitative research. Qualitative Inquiry, 16(10), 837–851.
표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.