응답률 (Response Rate)

측정·도구 연구방법론
한 줄 정의: 설문이나 조사에 참여하도록 요청받은 사람 중 실제로 응답을 완료한 사람의 비율입니다.

쉽게 풀면

1,000명에게 설문지를 보냈는데 300명만 답을 보내왔다면 응답률은 30%입니다. 이 숫자 자체도 중요하지만, 진짜 문제는 "누가 응답하지 않았는가"입니다. 만약 설문에 관심이 많거나 특정 성향을 가진 사람들만 유독 잘 응답했다면, 남은 300명의 데이터는 원래 조사하려던 1,000명 전체를 제대로 대표하지 못합니다. 즉 응답률은 단순히 참여도를 나타내는 숫자가 아니라, 결과를 얼마나 일반화할 수 있는지를 가늠하는 첫 번째 신호입니다.

왜 중요한가

응답률은 설문조사나 서면 평가를 활용하는 거의 모든 실증 연구에서 결과의 신뢰성과 일반화 가능성을 판단하는 기초 지표로 다뤄집니다.

특히 여론조사, 보건 설문, 조직 만족도 조사처럼 표본을 통해 모집단 전체를 추정하려는 연구에서는 응답률과 무응답 편향을 어떻게 다뤘는지가 연구 방법론 심사와 논문 심사에서 자주 지적되는 부분입니다. 이 때문에 응답률을 높이기 위한 조사 설계 기법(반복 발송, 인센티브 제공 등) 자체도 방법론 연구의 한 축을 이룹니다.

계산과 범위

응답률 = 응답을 완료한 수 ÷ 응답할 자격이 있는 표본의 수입니다. 분모를 무엇으로 잡느냐가 핵심입니다.

가상의 계산: 1,000명에게 설문을 보냈고 주소 불명 등으로 대상이 아닌 경우가 40명, 응답 완료가 288명이면 적격 표본 960명 기준 응답률은 288 ÷ 960 = 30.0%이고, 발송 1,000명 기준으로는 28.8%입니다(코드로 계산). 분모가 달라 같은 자료에서 두 값이 나옵니다. 미국여론조사협회(AAPOR, 2016)는 부분 응답과 자격 불명 사례의 처리에 따라 RR1~RR6 같은 여러 계산식을 정의하고 있습니다. 범위는 0~100%입니다.

해석 기준

응답률이 낮다고 곧 결과가 편향되었다는 뜻은 아닙니다. 편향은 응답한 사람과 응답하지 않은 사람이 다른 정도에 달려 있습니다. 응답률과 비응답 편향의 관계를 메타분석한 연구들은 둘의 관계가 생각보다 약하다고 보고했습니다(Groves, 2006; Groves & Peytcheva, 2008).

정의상 응답자 평균과 전체 평균의 차이(편향)는 (비응답 비율) × (응답자 평균 − 비응답자 평균)입니다. (가상) 응답률 30%, 응답자 평균 60, 비응답자 평균 50이면 전체 평균은 0.3 × 60 + 0.7 × 50 = 53이고, 응답자 평균 60은 이를 7점 과대 추정합니다(0.7 × 10). 응답률이 같아도 두 집단의 차이가 0이면 편향도 0입니다.

보고 방법

논문에서는 이렇게 쓰입니다

실제 논문에서

국내 학술지 논문에서 이 용어가 쓰인 문장을 그대로 옮겼습니다. 제목·학술지·연도와 원문 링크를 함께 적었습니다.

예시 문장

아래는 용어의 쓰임을 보여 주려고 만든 예시로, 실제 논문에서 가져온 문장이 아닙니다.

"온라인 설문은 총 1,200명에게 발송되었으며, 응답률은 42%(504명)였다. 무응답자와 응답자의 인구통계학적 특성은 유의한 차이가 없었다."

이 문장은 응답률 수치를 밝히는 데 그치지 않고, 응답하지 않은 사람들이 응답자와 크게 다르지 않다는 점까지 확인해 결과의 대표성에 대한 우려를 줄이려 했다는 뜻입니다.

"기업 임직원을 대상으로 한 조직문화 설문의 응답률(response rate)은 부서별로 큰 편차를 보였으며, 이는 부서 특성에 따른 참여 동기 차이를 시사한다."

조직심리학·경영학 분야의 예문으로, 응답률이 전체 수치뿐 아니라 하위 집단별 편차를 함께 살펴야 하는 진단적 지표로도 활용됨을 보여줍니다.

"우편 설문과 온라인 설문을 병행한 결과, 우편 설문의 응답률(response rate)이 온라인 설문보다 높게 나타나 조사 방식에 따른 참여도 차이를 확인하였다."

조사방법론 분야의 예문으로, 동일한 대상이라도 조사 매체나 방식에 따라 응답률이 달라질 수 있음을 비교하는 연구에서 이 용어가 쓰이는 사례를 보여줍니다.

조금 더 깊게 보면

응답률 계산 방식은 학계와 조사기관마다 조금씩 다를 수 있는데, 예를 들어 미국여론조사협회(AAPOR)는 완전 응답과 부분 응답을 어떻게 처리할지에 따라 여러 종류의 응답률 계산식을 제시하고 있습니다. 응답률 자체보다 더 중요하게 다뤄지는 것은 무응답이 특정 특성을 가진 사람들에게 체계적으로 몰려 있는지를 나타내는 무응답 편향(nonresponse bias)이며, 이를 점검하기 위해 응답자와 무응답자의 인구통계학적 정보를 비교하거나, 초기 응답자와 늦은 응답자를 비교하는 방법이 흔히 사용됩니다.

주의할 점

응답률이 높다고 해서 데이터 품질이 자동으로 보장되는 것은 아니며, 반대로 응답률이 낮아도 무응답자와 응답자 사이에 체계적인 차이가 없다면 큰 문제가 되지 않을 수 있습니다. 응답률만 볼 것이 아니라, 무응답이 무작위로 발생했는지 아니면 특정 집단에 쏠려 있는지(무응답 편향)를 함께 살펴야 하며, 이는 표본추출오차와는 구분되는 별개의 데이터 품질 문제입니다.

헷갈리기 쉬운 용어

조사의 질을 말하는 용어들은 서로 다른 오류입니다.

용어의미오류의 성격
응답률적격 표본 중 응답 완료 비율참여 정도의 지표
비응답 편향응답자와 비응답자의 차이로 생기는 체계적 오차편향(표본을 키워도 줄지 않음)
표본추출오차표본을 뽑는 우연에 의한 오차우연 오차(표본을 키우면 줄어듦)

참고 문헌

  1. American Association for Public Opinion Research. (2016). Standard Definitions: Final Dispositions of Case Codes and Outcome Rates for Surveys (9th ed.). AAPOR.
  2. Groves, R. M. (2006). Nonresponse rates and nonresponse bias in household surveys. Public Opinion Quarterly, 70, 646–675.
  3. Groves, R. M., & Peytcheva, E. (2008). The impact of nonresponse rates on nonresponse bias: a meta-analysis. Public Opinion Quarterly, 72, 167–189.
  4. Baruch, Y., & Holtom, B. C. (2008). Survey response rate levels and trends in organizational research. Human Relations, 61, 1139–1160.

표의 기준값은 위 문헌에 근거한 관례이며, 분야·학술지마다 다른 기준을 쓸 수 있습니다.

관련 용어