고객 설문조사, 몇 명에게 물어야 결과를 믿을 수 있을까요?

설문 표본 크기, 결론부터 보면 몇 명이 필요할까요?

전체 응답 비율을 ±5%포인트 안에서 보려면 약 400명, ±3%포인트 안에서 보려면 약 1,000명이 필요합니다. 고객을 무작위로 뽑았고 신뢰수준 95%를 기준으로 했을 때의 값입니다. 다만 결과를 흔드는 것은 숫자보다 누가 응답에서 빠졌는지와 질문을 어떻게 했는지인 경우가 많으므로, 표본 수와 함께 두 가지를 먼저 점검해 보세요.

응답자 수에 따라 오차는 얼마나 달라질까요?

표본오차는 전체 고객에게 물었을 때와 일부에게 물었을 때의 결과 차이가 어느 범위 안에 있는지를 나타냅니다. 응답 비율이 50%에 가까울 때 오차가 가장 크므로, 보통 그 값을 기준으로 계산합니다. 계산식은 0.25를 표본 수로 나눈 값의 제곱근에 1.96을 곱한 값입니다. 400명 조사에서 만족 응답이 60%라면 실제 값은 대략 55%에서 65% 사이에 있다고 읽습니다.

표본 수에 따른 최대 표본오차 (단순무작위추출, 신뢰수준 95%)

오차를 절반으로 줄이려면 표본을 네 배로 늘려야 합니다. 400명에서 1,600명으로 늘려야 ±4.9%포인트가 약 ±2.5%포인트가 되는 식이라, 비용 대비 정확도를 따져 적정선을 정하는 것이 좋습니다. 고객 수가 적은 기업 간 거래에서는 모집단 크기를 반영한 보정식을 쓰면 필요한 표본이 줄어듭니다.

고객 집단별로 나눠 보려면 표본을 어떻게 잡아야 할까요?

전체 400명을 조사해 연령대나 지역 다섯 집단으로 나누면 한 집단은 평균 80명이 되고, 집단별 오차는 약 ±11%포인트로 커집니다. 그래서 표본은 전체가 아니라 비교하고 싶은 가장 작은 집단을 기준으로 정해야 합니다. 신규 고객과 이탈 고객을 비교하려는데 이탈 고객이 적다면, 그 집단만 따로 더 많이 뽑고 분석할 때 비중을 맞추는 방법을 쓸 수 있습니다. 집단을 나누는 기준은 조사 전에 정해 두세요. 결과를 받은 뒤 이런저런 기준으로 나눠 보면 우연히 생긴 차이를 의미 있는 발견으로 잘못 읽기 쉽습니다.

응답률이 낮으면 결과를 믿을 수 없을까요?

꼭 그렇지는 않습니다. 무응답 편향을 따로 측정한 59개 연구를 종합한 메타분석(Groves, Peytcheva, 2008)은 응답률과 편향 사이의 상관이 매우 작았다고 보고했습니다. 미국 국립연구회의 보고서(National Research Council, 2013)도 이 연구를 들어 응답률만으로는 편향을 가늠하기 어렵다고 설명합니다.

중요한 것은 응답하지 않은 사람이 질문 주제에 대해 응답한 사람과 다르게 생각하는지입니다. 불만이 큰 고객일수록 만족도 설문에 답하지 않는다면, 응답률이 높아도 만족도는 실제보다 좋게 나옵니다. 응답자와 전체 고객의 구매 금액, 거래 기간 같은 기록을 비교해 두 집단이 비슷한지 확인해 보세요. 응답률을 높이는 노력이 쓸모없다는 뜻은 아닙니다. 응답률 숫자 하나로 결과의 품질을 판단하지 말고 누가 빠졌는지를 함께 살피라는 뜻입니다.

표본 수보다 먼저 확인할 오류는 무엇일까요?

표본오차는 설문 결과를 흔드는 여러 오류 가운데 하나일 뿐입니다. 다른 오류는 표본을 늘려도 줄지 않습니다.

설문 결과를 흔드는 오류와 줄이는 방법

선거 여론조사를 규율하는 「공직선거법」 제108조도 조사 대상의 전 계층을 대표할 수 있도록 응답자를 뽑고, 특정 방향으로 치우친 어휘나 응답을 유도하는 질문을 쓰지 않도록 정합니다. 기업 설문에 법적 의무는 아니지만 좋은 점검 기준이 됩니다. 질문 문구는 본조사 전에 고객 몇 명에게 먼저 시험해 보세요. 뜻을 다르게 읽는 문항이나 답하기 곤란한 문항이 이 단계에서 드러납니다.

설문 결과를 보고할 때는 무엇을 함께 밝혀야 할까요?

같은 법은 선거 여론조사 결과를 공표할 때 선거여론조사기준이 정한 사항을 함께 밝히도록 하고, 조사 전에 표본의 크기와 조사 방법, 전체 설문 내용을 신고하도록 합니다. 사내 보고서에도 조사 대상과 표본 수, 응답률, 표본오차, 조사 방법, 질문 문구를 함께 적어 두면 읽는 사람이 결과의 무게를 스스로 판단할 수 있습니다. 두 선택지의 응답 비율 차이가 표본오차 범위 안이라면 비슷하다고 보고하는 편이 정확합니다. 근거와 한계를 함께 밝히는 일은 한국비즈니스연구원의 핵심 가치인 객관성과 맞닿아 있습니다.

설문 결과를 경영 판단에 쓸 때 무엇을 조심해야 할까요?

설문은 고객이 말한 것을 보여 줄 뿐, 실제로 할 행동을 보장하지 않습니다. 구매 의향이 높게 나와도 사전 예약이나 시범 판매로 한 번 더 확인하는 것이 안전합니다. 만족도가 높게 나온 고객이 실제로 재구매했는지 거래 기록과 이어 보면 설문의 예측력도 점검할 수 있습니다. 원인과 결과를 가려야 하는 질문이라면 경영 컨설팅의 효과에서 본 무작위 실험처럼 비교 집단을 둔 설계가 필요하고, 소수의 눈에 띄는 응답에 끌리는 착시는 다른 회사의 성공 사례 활용법과 같은 원리입니다. 현장 조사와 데이터 분석을 함께 쓰는 방식은 경영 연구 방법에서, 고객 조사 항목은 시장 조사·경쟁 분석에서 볼 수 있습니다.

설문조사 표본 자주 묻는 질문

출처

1. Public Opinion Quarterly, 「The Impact of Nonresponse Rates on Nonresponse Bias: A Meta-Analysis」(Groves, Peytcheva), 2008. https://doi.org/10.1093/poq/nfn011
2. National Research Council, 「Nonresponse in Social Science Surveys: A Research Agenda」, The National Academies Press, 2013. https://www.nationalacademies.org/read/18293/chapter/4
3. 국가법령정보센터, 「공직선거법」 제108조(여론조사의 결과공표금지 등), 2026년 7월 1일 시행. https://www.law.go.kr/법령/공직선거법