동일방법편의 (Common Method Bias)
쉽게 풀면
한 사람에게 "오늘 기분이 어떤가요?"와 "오늘 날씨를 몇 점으로 평가하나요?"를 연달아 물어보면, 실제 기분과 날씨 평가 사이에 별 관계가 없어도 마침 그날 기분이 좋았던 사람은 두 질문 모두에 후하게 답하는 경향이 생길 수 있습니다. 이렇게 "같은 사람이, 같은 순간에, 같은 방식(설문지)으로" 여러 변수를 한꺼번에 답하다 보면, 실제 두 변수의 관계와 무관하게 응답자의 그날 기분이나 응답 습관 때문에 상관관계가 인위적으로 커지거나 작아질 수 있습니다. 이 왜곡을 동일방법편의라고 부릅니다.
왜 중요한가
설문 기반 실증연구는 대부분 독립변수와 종속변수를 동일한 응답자에게 동일한 설문지로, 흔히 같은 시점에 함께 묻습니다. 이런 자료 수집 방식 자체가 변수 간 상관관계를 실제보다 부풀리거나 왜곡할 위험을 안고 있기 때문에, 연구 결과가 진짜 이론적 관계를 보여주는지 아니면 측정 방식의 산물인지를 가려내는 문제가 됩니다. 그래서 경영학, 조직심리학, 마케팅처럼 자기보고식 설문에 크게 의존하는 분야에서는 연구설계와 심사 과정 모두에서 동일방법편의를 어떻게 통제했는지가 논문의 신뢰도를 판단하는 핵심 기준 중 하나로 다뤄집니다.
논문에서는 이렇게 쓰입니다
이 문장은 연구자가 원인이 되는 변수와 결과가 되는 변수를 같은 사람이 같은 순간에 같은 설문으로 답하지 않도록 시간차를 두거나 응답자를 분리해서, 상관관계가 응답 방식 때문에 부풀려지지 않도록 설계했다는 뜻입니다. 조직심리학이나 경영학처럼 자기보고식 설문을 많이 쓰는 분야에서 특히 자주 언급됩니다.
이 문장은 마케팅이나 소비자행동 연구처럼 시간차 설계나 다른 응답자 분리가 현실적으로 어려운 경우, 자료를 다 모은 뒤에 통계적 방법으로 동일방법편의가 결과를 심각하게 왜곡했는지 사후 점검했다는 의미입니다.
이는 자료를 수집하는 단계에서부터 절차적으로 편의를 줄이려는 시도로, 인사관리나 조직행동 연구에서 사전 예방적 설계 방안으로 자주 언급되는 방식입니다.
조금 더 깊게 보면
동일방법편의를 점검하는 대표적인 통계 기법으로는 모든 문항을 하나의 요인으로 묶었을 때 설명력이 비정상적으로 크지 않은지를 보는 Harman의 단일요인검증, 그리고 측정하지 않은 잠재 공통요인을 모형에 추가해 그 영향을 통제하는 방법 등이 있습니다. 다만 이런 사후 통계 검증은 한계가 뚜렷하다는 지적이 많아서, 최근 연구방법론 문헌에서는 시간차 측정, 응답원 분리, 익명성 보장 같은 사전 설계 단계의 예방 조치를 함께 쓰는 것을 더 권장하는 경향이 있습니다. 또한 동일방법편의는 흔히 응답자의 일관성 동기나 사회적으로 바람직하게 보이려는 경향, 문항 배치 순서 등 여러 하위 요인이 겹쳐서 나타나므로, 한 가지 원인으로 단정하기보다 다양한 통제 방법을 함께 고려하는 것이 일반적입니다.
주의할 점
동일방법편의는 사회적바람직성편향과 자주 함께 언급되지만 서로 다른 개념입니다. 사회적바람직성편향은 응답자가 좋게 보이려고 답을 왜곡하는 개인적 동기의 문제이고, 동일방법편의는 측정 방식 자체가 같아서 생기는 통계적 왜곡입니다. 통계적으로 Harman의 단일요인검증을 거쳤다고 해서 동일방법편의가 없다고 단정할 수는 없다는 점도 자주 지적되는 한계입니다.