이월효과 (Carryover Effect)
쉽게 풀면
두 가지 진통제 A와 B의 효과를 비교한다고 해봅시다. 같은 환자에게 먼저 A를 먹이고 통증을 측정한 뒤, 얼마 후 B를 먹이고 다시 측정하는 방식(피험자내설계)을 쓸 수 있습니다. 그런데 A의 약효가 몸에서 다 빠지기 전에 B를 먹이면, B를 먹었을 때 측정된 효과에는 사실 A의 남은 효과가 섞여 있게 됩니다. 이렇게 앞 조건의 영향이 뒤 조건의 결과에 넘어와 섞이는 것을 이월효과라고 합니다. 이월효과가 있으면 "B가 진짜 효과가 있어서 좋아진 건지, A의 잔여 효과 때문에 좋아진 건지" 구분할 수 없게 되어 결과 해석이 왜곡됩니다.
왜 중요한가
이월효과는 피험자내설계나 교차설계처럼 같은 참가자가 여러 조건을 순서대로 경험하는 연구 방법 전반의 타당성을 좌우하는 문제입니다. 이 효과를 통제하지 못하면 처치 자체의 순수한 효과와 앞선 조건의 잔여 영향이 뒤섞여, 연구 설계가 아무리 정교해도 결론을 신뢰하기 어려워집니다. 그래서 임상시험, 심리학 실험, 교육 중재 연구 등 반복측정을 활용하는 여러 분야에서 이월효과 통제(세척기간 설정, 순서 무작위화 등)는 연구 설계 단계에서 반드시 짚고 넘어가야 할 요소로 다뤄집니다.
논문에서는 이렇게 쓰입니다
이 문장은 "앞 조건의 효과가 다음 조건 측정에 섞이지 않도록, 두 처치 사이에 충분한 시간 간격을 두었다"는 뜻입니다.
이 문장은 "실험 순서 자체가 결과에 영향을 미쳤는지, 즉 이월효과가 존재하는지를 통계적으로 별도로 검토했다"는 의미입니다.
이 문장은 "앞서 경험한 조건의 인상이 뒤 조건 평가에 영향을 주지 않도록, 참가자마다 제시 순서를 다르게 배정했다"는 뜻입니다.
조금 더 깊게 보면
이월효과는 크게 단순 이월효과와 상호작용(비대칭) 이월효과로 구분해서 볼 수 있습니다. 단순 이월효과는 앞 조건이 무엇이었든 비슷한 크기로 뒤 조건에 영향을 주는 경우이고, 상호작용 이월효과는 어떤 순서로 조건을 받았는지에 따라 영향의 크기나 방향이 달라지는 경우로, 후자는 세척기간을 늘리는 것만으로는 완전히 해결되지 않을 수 있어 통계적으로 더 주의 깊게 다뤄야 합니다. 논문에서는 이를 확인하기 위해 처치 순서를 하나의 요인으로 포함한 분산분석이나 혼합모형을 활용하거나, 순서 간 결과 차이를 별도로 검정하는 방식을 흔히 사용합니다. 또한 완전한 세척이 어려운 개입(예: 학습이나 행동 변화를 유도하는 처치)의 경우, 애초에 교차설계 대신 병렬설계를 택해 이월효과 자체를 원천적으로 피하는 선택을 하기도 합니다.
주의할 점
이월효과를 의심 없이 지나치면 교차설계 임상시험이나 반복측정 실험의 결과가 실제보다 부풀려지거나 왜곡될 수 있습니다. 조건 사이에 충분한 세척기간을 두거나, 순서를 무작위로 배치하는 역균형화로 대비해야 합니다.