자연실험 (Natural Experiment)
쉽게 풀면
진짜 실험을 하려면 사람들을 무작위로 두 집단에 나누고 한쪽에만 처치를 가해야 하지만, 현실에서는 그렇게 하는 것이 불가능하거나 비윤리적인 경우가 많습니다. 자연실험은 이미 세상에서 일어난 사건 — 법 개정, 정책 시행 시점, 지역 경계, 갑작스러운 제도 변화 등 — 을 이용해서 마치 누군가 일부러 실험을 설계한 것처럼 두 집단(정책 적용 지역 vs 미적용 지역 등)을 비교하는 방법입니다.
왜 중요한가
무작위 배정 실험이 불가능하거나 비윤리적인 경우가 많은 경제학, 정치학, 역학 같은 분야에서 자연실험은 인과관계에 근접한 추정을 가능하게 해주는 대안적 방법으로 각광받아 왔습니다. 정책 효과를 평가하는 실증연구에서 인과추론의 신뢰도를 높이는 핵심 전략으로 자리잡았고, 이런 이유로 정책평가·보건정책·노동경제학 논문에서 자주 등장합니다.
논문에서는 이렇게 쓰입니다
이 문장은 "연구자가 직접 정책을 설계한 것이 아니라, 실제로 벌어진 정책 시행이라는 사건을 실험처럼 활용해 두 집단을 비교했다"는 뜻입니다.
이 예문은 역사적 보건 사건을 자연실험으로 활용해 공중보건 개입의 효과를 사후적으로 검증한 역학·보건정책 연구의 사례입니다.
이 문장은 노동경제학 연구에서 제도적으로 발생한 무작위성(추첨)을 자연실험처럼 활용한 대표적인 사례를 보여줍니다.
조금 더 깊게 보면
자연실험을 분석할 때는 이중차분법, 회귀불연속설계, 도구변수법 같은 준실험적 통계 기법이 함께 사용되는 경우가 많으며, 어떤 기법을 쓰느냐는 사건이 발생한 방식(시점 차이인지, 임계값에 의한 구분인지, 외생적 변수에 의한 것인지)에 따라 달라집니다. 자연실험의 타당성을 평가할 때 핵심은 비교되는 집단들이 사건 발생 이전에 이미 유사한 추세를 보였는지를 확인하는 것으로, 이를 평행추세 가정(parallel trends assumption) 검증이라 부르며 논문에서 흔히 사전 추세 그래프나 통계 검정으로 함께 제시됩니다.
주의할 점
자연실험은 준실험설계와 자주 혼동되지만, 준실험설계는 연구자가 의도적으로 비동등 비교집단을 설정하는 반면 자연실험은 연구자의 설계 없이 '우연히' 발생한 사건을 사후적으로 활용한다는 점에서 구분됩니다. 또한 비교되는 두 집단이 애초에 다른 이유로 차이가 났을 가능성(교란변수)을 배제하기 어려운 경우가 많아 해석에 주의가 필요합니다.