반사실적분석 (Counterfactual Analysis)

국제개발협력학
한 줄 정의: 만약 사업 개입이 없었다면 어떤 결과가 나타났을지를 추정하여, 실제 관찰된 결과와 비교함으로써 개입의 순수한 효과를 분리해내는 평가 방법론입니다.

쉽게 풀면

반사실적분석은 '이 사업을 안 했다면 어떻게 됐을까'라는 가상의 상황을 과학적으로 추정해서, 실제로 일어난 일과 비교하는 방법입니다. 이렇게 해야 관찰된 변화 중 정말로 사업 덕분에 생긴 부분이 얼마인지를 가려낼 수 있습니다.

왜 중요한가

사업 지역의 상황이 좋아졌다고 해서 그것이 반드시 사업의 효과라고 단정할 수 없기 때문에, 반사실적분석은 상관관계와 인과관계를 구분하는 엄밀한 영향평가의 핵심 원리로서 개발협력 분야 근거기반 정책의 토대가 되기 때문입니다.

논문에서는 이렇게 쓰입니다

"반사실적분석을 위해 무작위대조시험 설계를 통해 대조군을 구성하였다."

반사실적분석의 실행 방법을 설명한 예문입니다.

"본 연구는 이중차분법을 활용해 정책 개입의 반사실적 효과를 추정하였다."

반사실적분석 기법의 적용 사례를 다룬 연구 예시입니다.

조금 더 깊게 보면

반사실적분석은 무작위대조시험 외에도 성향점수매칭, 이중차분법, 회귀불연속설계 등 다양한 준실험적 방법을 통해 수행될 수 있으며, 어떤 방법을 선택하느냐에 따라 요구되는 자료와 가정이 달라집니다.

주의할 점

반사실적분석에 필요한 대조군 구성이나 정교한 통계기법은 상당한 자료와 전문성, 비용을 요구하므로, 소규모 사업에서는 실행 가능성을 신중히 검토해야 합니다.

관련 용어