사전-사후검사설계 (Pretest-Posttest Design)

한 줄 정의: 어떤 프로그램이나 처치를 하기 전과 후에 같은 대상을 동일한 방법으로 측정하여 변화가 있었는지 비교하는 연구 설계입니다.

쉽게 풀면

다이어트 프로그램의 효과를 확인하고 싶다면 어떻게 해야 할까요? 프로그램을 시작하기 전에 참가자들의 몸무게를 먼저 재고(사전검사), 프로그램이 끝난 뒤 다시 몸무게를 재서(사후검사) 그 차이를 비교하면 됩니다. 사전-사후검사설계는 바로 이런 방식입니다. 교육 프로그램의 효과, 심리 치료의 효과, 새로운 훈련법의 효과 등 "어떤 개입을 하면 사람이 실제로 달라지는가"를 확인하고 싶을 때 가장 기본적으로 쓰이는 연구 설계입니다.

왜 중요한가

사전-사후검사설계는 별도의 비교집단 없이도 개입 전후의 변화를 간단히 살펴볼 수 있어, 파일럿 연구나 예비 조사처럼 자원이 제한된 초기 단계 연구에서 특히 자주 쓰입니다. 이 기본 설계는 이후 통제집단을 추가한 더 엄격한 실험설계로 발전하는 출발점이 되기 때문에, 교육학·심리학·보건학 논문에서 연구 방법론을 논할 때 자주 언급됩니다.

논문에서는 이렇게 쓰입니다

"참가자들은 프로그램 시작 전(사전검사)과 8주 프로그램 종료 후(사후검사)에 동일한 불안 척도를 작성하였으며, 사후검사 점수가 사전검사 점수보다 유의하게 낮았다."

이 문장은 "프로그램 전후로 같은 사람들에게 같은 척도를 두 번 실시해서 점수 변화를 비교했고, 프로그램 이후 불안이 실제로 줄었다"는 뜻입니다.

"직무 만족도 향상 워크숍 실시 전후로 참가자의 직무 만족도 점수를 비교한 결과, 사후 점수가 사전 점수보다 높게 나타났다."

이 문장은 경영학·조직심리학 분야에서도 워크숍 같은 단기 개입의 효과를 사전-사후 비교로 확인한다는 것을 보여줍니다.

"영양 교육 프로그램 참여 전후로 측정한 식습관 점수는 프로그램 종료 후 유의하게 개선되었다."

이 문장은 보건·영양학 연구에서도 사전-사후검사설계가 개입의 즉각적인 효과를 확인하는 기본적인 방법으로 쓰인다는 것을 보여줍니다.

조금 더 깊게 보면

비교집단이 없는 사전-사후검사설계는 준실험설계(quasi-experimental design) 중에서도 가장 단순한 형태로 분류되며, 내적 타당도가 상대적으로 약하다는 한계가 있습니다. 이 때문에 연구자들은 결과를 해석할 때 성숙 효과나 회귀 효과(regression to the mean, 극단적인 사전 점수가 자연스럽게 평균 쪽으로 이동하는 현상) 같은 대안적 설명을 함께 검토하는 경우가 많습니다.

주의할 점

사전-사후검사설계만으로는 점수 변화가 정말 그 개입 때문인지 확신하기 어렵습니다. 시간이 지나며 저절로 좋아졌거나(성숙 효과), 같은 검사를 두 번 봐서 요령이 생겼을 수도 있기 때문입니다(검사 반복 효과). 이런 다른 가능성을 배제하려면 개입을 받지 않은 비교집단을 함께 두는 것이 좋으며, 같은 검사를 반복했을 때 점수가 얼마나 안정적인지를 보는 검사-재검사 신뢰도와 혼동하지 않도록 주의해야 합니다.