사후검사통제집단설계 (Posttest-Only Control Group Design)
쉽게 풀면
동전 던지듯 참가자를 무작위로 두 팀에 나눈다면, 굳이 시작 전에 실력 차이를 미리 재보지 않아도 두 팀의 출발선은 통계적으로 비슷하다고 볼 수 있습니다. 이 원리를 이용해, 무작위 배정으로 두 집단을 만든 다음 한쪽에만 처치를 가하고, 끝난 뒤 결과만 한 번 측정해서 비교하는 설계가 사후검사통제집단설계입니다. 사전검사를 하지 않기 때문에 실험이 간단해지고, 사전검사 자체가 참가자에게 영향을 주는 부작용(예: 시험을 한 번 봐서 다음 시험에 익숙해지는 것)도 피할 수 있습니다.
왜 중요한가
사후검사통제집단설계는 무작위 배정을 통해 인과관계를 추론할 수 있는 진실험설계의 가장 단순한 형태로, 교육·심리·보건 분야에서 개입 프로그램의 효과를 검증하는 연구에 널리 쓰입니다. 사전검사로 인한 학습효과나 반응성(reactivity)을 피할 수 있어, 사전검사 자체가 참가자의 태도나 행동을 바꿀 위험이 있는 연구(예: 민감한 주제의 설문, 처치에 대한 민감성이 큰 심리 실험)에서 특히 선호됩니다.
논문에서는 이렇게 쓰입니다
이 문장은 "참가자를 무작위로 두 집단에 나누고, 시작 전 점수는 재지 않은 채 프로그램이 끝난 뒤의 점수만으로 두 집단을 비교했다"는 뜻입니다.
참가자들의 처음 지식수준을 따로 재지 않은 채, 교육을 받은 집단과 받지 않은 집단 사이에 나중에 나타난 건강행동의 차이만을 비교했다는 뜻입니다.
사전에 소비자들의 태도를 따로 측정하지 않고, 서로 다른 광고를 본 뒤의 태도만을 비교해 광고 유형의 효과를 살펴보았다는 의미입니다.
조금 더 깊게 보면
사후검사통제집단설계는 사전검사가 없는 대신, 무작위 배정이 제대로 이루어졌다는 전제 위에서 두 집단의 사전 동등성을 통계적으로 가정합니다. 따라서 표본 크기가 충분히 크지 않으면 우연히 두 집단의 특성이 처치 전부터 달라져 있을 위험(무작위화 실패)을 배제하기 어려우며, 이 경우 사후검사 결과의 차이가 처치 효과인지 우연한 집단 차이인지 구분하기 어려워집니다. 이런 우려를 줄이기 위해 표본 크기를 늘리거나, 성별·연령 같은 주요 변수를 층화한 뒤 무작위 배정하는 방법이 함께 쓰이기도 합니다.
주의할 점
사후검사통제집단설계는 무작위 배정 덕분에 내적타당도는 높은 편이지만, 사전검사가 없어 두 집단이 실제로 처치 전에 동등했는지를 직접 확인할 방법이 없습니다. 사전검사의 영향까지 함께 확인하고 싶다면 사전검사 유무를 모두 포함하는 솔로몬 4집단 설계를 사용합니다.