현실주의 평가 (Realist Evaluation)
쉽게 풀면
같은 감기약도 어떤 사람에게는 잘 듣고 어떤 사람에게는 안 듣습니다. 단순히 "이 약은 효과가 있다/없다"라고만 말하면 반쪽짜리 설명입니다. 현실주의 평가는 이런 문제의식에서 출발합니다. 하나의 프로그램(예: 금연 캠페인)이 모든 사람과 모든 상황에서 똑같이 작동한다고 보지 않고, "맥락(Context) + 메커니즘(Mechanism) = 결과(Outcome)"라는 틀로 "어떤 환경에서, 참여자의 어떤 심리적 반응을 거쳐, 어떤 결과가 나오는가"를 추적합니다. 즉 효과의 '있고 없음'이 아니라 효과가 발생하는 '작동 원리'를 밝히는 데 초점을 둡니다.
왜 중요한가
정책·프로그램 평가 연구에서는 동일한 개입이 지역이나 대상 집단에 따라 다른 효과를 보이는 경우가 흔한데, 현실주의 평가는 그 이유를 설명하는 이론적 틀을 제공합니다. 이는 단순 효과성 검증을 넘어 "어떤 조건에서 확산 가능한가"라는 정책적 함의를 도출하는 데 필수적이어서, 보건정책·사회복지·교육학 등 개입 연구 전반에서 중요하게 다루어집니다.
논문에서는 이렇게 쓰입니다
이 문장은 프로그램의 성공 여부만 판단한 것이 아니라, 특정 지역 특성이나 참여자의 동기 같은 맥락 요인이 어떤 심리적·사회적 과정을 거쳐 행동 변화로 이어졌는지까지 규명했다는 의미입니다. 보건정책, 사회복지, 교육 프로그램 연구에서 자주 활용됩니다.
교육학 분야에서 동일한 프로그램이 맥락에 따라 다른 결과를 낳는 이유를 CMO(맥락-메커니즘-결과) 틀로 설명한 사례입니다.
조금 더 깊게 보면
현실주의 평가의 핵심 산출물은 CMO 구성(Context-Mechanism-Outcome configuration)이라 불리는 명제들로, 연구자는 자료 분석을 통해 여러 개의 CMO 구성을 도출하고 이를 정교화(refine)하는 과정을 반복합니다. 이 접근은 비판적 실재론(critical realism)이라는 철학적 토대에 기반하며, 관찰되지 않는 메커니즘의 존재를 가정한다는 점에서 실증주의적 평가와 구분됩니다. 논문을 읽을 때는 저자가 제시한 초기 프로그램 이론이 자료를 통해 어떻게 수정·검증되었는지를 함께 확인하는 것이 이해에 도움이 됩니다.
주의할 점
현실주의 평가는 프로그램 평가의 한 종류이지만, 일반적인 프로그램 평가가 "목표 달성 여부"에 집중하는 것과 달리 "왜, 어떤 조건에서 그런 결과가 나왔는가"라는 인과 메커니즘 설명에 방점을 둔다는 차이가 있습니다. 두 접근을 혼동하지 않도록 주의해야 합니다.