일회 사례연구설계 (One-Shot Case Study Design)

한 줄 정의: 통제집단이나 사전검사 없이, 한 집단에 처치를 가한 뒤 그 결과를 단 한 번 측정하는 가장 단순한 전실험설계(pre-experimental design)입니다.

쉽게 풀면

새로 나온 비료를 화분 하나에 뿌려보고 한 달 뒤 잎이 무성해진 것을 보고 "비료 덕분이다"라고 결론짓는 상황을 생각해보세요. 비료를 뿌리기 전 화분이 어땠는지(사전검사)도 모르고, 비료를 뿌리지 않은 다른 화분(통제집단)과 비교하지도 않았습니다. 이렇게 한 집단에 처치를 한 번 가하고 그 이후 결과만 한 번 측정하는 설계가 일회 사례연구설계입니다. 실행이 가장 쉽고 비용이 적게 들지만, 관찰된 변화가 정말 처치 때문인지, 아니면 원래 그랬을 변화인지 전혀 구분할 수 없다는 근본적인 약점이 있습니다.

왜 중요한가

일회 사례연구설계는 연구방법론 교육에서 실험설계의 타당도 문제를 설명하는 가장 단순한 반례로 자주 등장합니다. 왜 사전검사와 통제집단이 필요한지를 이해하려면 이 설계가 어떤 대안적 설명들을 배제하지 못하는지를 먼저 알아야 하기 때문에, 이후 배우는 준실험설계나 진실험설계의 필요성을 정당화하는 출발점 역할을 합니다. 실제 논문에서는 예산·윤리·현실적 제약으로 이 설계밖에 쓸 수 없을 때, 그 한계를 스스로 명시하는 맥락에서 언급되는 경우가 많습니다.

논문에서는 이렇게 쓰입니다

"단일 집단을 대상으로 8주간의 프로그램을 실시한 뒤 사후 만족도만을 측정하는 일회 사례연구설계를 사용하였다."

이 문장은 "비교할 다른 집단도, 프로그램 시작 전 측정값도 없이, 프로그램이 끝난 뒤 결과 하나만을 살펴봤다"는 뜻입니다.

"신규 조직문화 교육을 실시한 후 참여 직원들의 직무만족도를 1회 측정하였으며, 이는 일회 사례연구설계에 해당하여 인과관계 해석에는 한계가 있음을 밝힌다."

경영학·조직행동 연구에서 파일럿 성격의 프로그램 평가에 이 설계를 사용하면서 스스로 인과추론의 한계를 명시하는 전형적인 예입니다.

"기존 문헌에서 흔히 보고되는 일회 사례연구설계의 한계를 보완하기 위해, 본 연구는 사전-사후 비교가 가능한 단일집단 사전사후설계로 전환하여 진행하였다."

선행연구의 설계상 약점을 지적하며 자신의 연구가 이를 어떻게 개선했는지 설명할 때도 이 용어가 비교 기준으로 언급됩니다.

조금 더 깊게 보면

연구방법론에서는 이 설계가 배제하지 못하는 대안적 설명들을 흔히 '내적타당도를 위협하는 요인'이라는 틀로 정리합니다. 예를 들어 시간이 지나면서 저절로 나타나는 성숙 효과, 처치와 무관하게 반복측정 시 점수가 평균 쪽으로 되돌아가는 평균으로의 회귀, 그리고 처치 외에 동시에 일어난 다른 사건(역사 효과) 등이 대표적입니다. 일회 사례연구설계는 사전측정이나 비교집단이 없어 이런 요인들의 영향을 통제·구분할 방법이 전혀 없기 때문에, 논문에서 이 설계를 사용했다면 대개 탐색적·기술적 목적으로만 결과를 제한적으로 해석하는 것이 일반적입니다.

주의할 점

일회 사례연구설계는 사전검사와 통제집단이 모두 빠져 있어, 측정된 결과가 처치 때문인지 시간 경과나 다른 요인 때문인지 구분할 근거가 전혀 없습니다. 이 때문에 내적타당도가 매우 낮다고 평가되며, 탐색적인 예비 연구 이상의 결론을 이끌어내기는 어렵습니다.