정량조사
설문조사
한 줄 정의
많은 사람에게 같은 질문을 같은 방식으로 던져, 답을 비율·평균 같은 숫자로 집계하는 조사입니다. Qualtrics는 설문이 사람들이 무엇을 생각하는지 보여 주고 큰 집단에 대한 결론을 내는 데 쓰이며, FGI 같은 정성조사는 그 이유를 파고든다고 구분합니다.
계산식
설문 결과가 "실제 전체 값"과 얼마나 다를 수 있는지는 **표본 오차(오차 범위)**로 나타냅니다. 비율(예: "알고 있다" 응답 비율)의 95% 신뢰수준 표본 오차는 통계 교재(LibreTexts)에서 다음과 같이 계산합니다.
표본 오차 = ± 1.96 × √( p × (1 − p) ÷ n )
p = 응답 비율 (예: 0.5), n = 응답자 수, 1.96 = 95% 신뢰수준 값
- p × (1 − p)는 p = 0.5일 때 가장 커서(0.25), 조사 회사는 보통 p = 0.5로 계산한 최대 오차를 발표합니다(AAPOR).
- 예시 1: n = 1,000, p = 0.5 → 1.96 × √(0.25 ÷ 1,000) = 1.96 × 0.0158 ≈ 0.031 → ±3.1%p
- 예시 2: n = 400, p = 0.5 → 1.96 × √(0.25 ÷ 400) = 1.96 × 0.025 = 0.049 → ±4.9%p
- 예시 3: n = 1,000이라도 그중 20대 응답자 100명만 따로 보면 → 1.96 × √(0.25 ÷ 100) = 1.96 × 0.05 = 0.098 → ±9.8%p
검산: 미국 여론조사협회(AAPOR) 자료는 200명 하위 집단의 오차를 ±6.9%p로 제시합니다. 1.96 × √(0.25 ÷ 200) = 1.96 × 0.0354 ≈ 0.069로 일치합니다. 퓨리서치센터(Pew)도 단순무작위표본 1,067명의 오차를 ±3%p로 제시하는데, 1.96 × √(0.25 ÷ 1,067) ≈ 0.030으로 일치합니다.
꼭 알아 둘 점 (AAPOR, Pew)
- 표본 오차는 **%가 아니라 %p(퍼센트포인트)**로 씁니다. 58% ±3%p라면 실제 값은 대략 55~61% 사이로 봅니다.
- 95% 신뢰수준이란, 같은 조사를 100번 하면 약 95번은 실제 값이 오차 범위 안에 든다는 뜻입니다.
- 표본이 커질수록 오차는 줄지만, AAPOR에 따르면 1,000명에서 2,000명으로 두 배 늘려도 줄어드는 폭은 약 1%p에 그칩니다.
- 두 비율의 차이(예: A안 대 B안 선호)는 오차가 개별 비율 오차의 약 두 배라고 Pew는 설명합니다. ±3%p 조사에서 5%p 차이는 오차 안일 수 있습니다.
- AAPOR은 표본 오차 계산이 확률 표본(모든 사람이 뽑힐 확률을 아는 표본)에만 맞고, 자발적으로 참여하는 온라인 패널 같은 비확률 표본에는 그대로 쓸 수 없다고 강조합니다. 질문 문구·진행 방식에서 생기는 다른 오차는 이 숫자에 포함되지 않습니다.
쉽게 풀어 말할 때
"손님 천 명한테 똑같은 질문지를 돌려서 '몇 %가 이렇게 답했다'를 숫자로 뽑는 거예요. 다만 전 국민한테 다 물어본 게 아니니까 '±3%p 정도는 왔다 갔다 할 수 있어요'라는 오차가 따라붙어요. 응답자가 적을수록 그 오차가 커지고요."
업계 말로 말할 때
- "전체 1,000명이라 오차가 ±3.1%p인데, 20대만 떼어 보면 100명이라 ±10%p 가까이 돼요. 20대 결과는 참고만 하죠."
- "A안 52%, B안 48%면 오차 범위 안이라 선호도 차이가 있다고 말하기 어렵습니다."
- "이번 건은 자사 회원 대상 온라인 설문이라 표본 오차를 쓰면 안 되고, '회원 응답 기준'이라고만 표기하겠습니다."
실무 팁
- 필요한 표본 수를 거꾸로 계산합니다. 오차를 ±3%p로 맞추려면 n = (1.96 ÷ 0.03)² × 0.25 ≈ 1,067.1 → 1,068명(올림)이 필요합니다. 쪼개 볼 하위 집단이 있다면 그 집단 기준으로도 따로 계산합니다.
- 보기 문항은 정성조사로 먼저 만듭니다. 설문은 준비한 보기 밖의 답을 못 잡습니다. 인터뷰·FGI에서 나온 이유를 보기로 씁니다(심층 인터뷰, FGI 항목).
- 누구에게 물었는지를 먼저 적습니다. 자사 고객·SNS 팔로워 대상 설문은 확률 표본이 아니라서 전체 시장 비율로 바꿔 말하면 안 됩니다. 보고서 첫 줄에 대상·인원·조사 방식·기간을 적습니다.
헷갈리기 쉬운 말
확인 퀴즈
확률 표본으로 뽑은 400명에게 물은 설문의 95% 신뢰수준 최대 표본 오차(p = 0.5)는?
정답과 풀이 보기
정답: 3번. 1.96 × √(0.25 ÷ 400) = 1.96 × 0.025 = 0.049 → ±4.9%p. 1번은 1.96을 곱하지 않은 값, 2번은 1,000명일 때, 4번은 100명일 때의 오차입니다.