신뢰구간 뜻과 공식, 여론조사 95%를 읽는 법

🧮 생활 속 수학

신뢰구간은 표본으로 구한 값 주위에 실제 값이 들어 있을 법한 범위를 신뢰수준과 함께 제시하는 구간이다. 신뢰구간 뜻과 공식, 여론조사 1,000명의 오차범위 ±3.1%p가 나오는 계산, 자주 하는 오해와 A/B 테스트 예시까지 숫자로 정리했다.

신뢰구간은 "표본에서 나온 숫자는 이것이지만, 전체를 조사했다면 이 범위 어딘가에 있었을 것"이라고 말하는 방법이다. 여론조사 기사 끝에 붙는 "95% 신뢰수준에서 표본오차 ±3.1%포인트"가 바로 신뢰구간이다. 지지율 45%라는 숫자 하나가 아니라 41.9%에서 48.1% 사이라는 범위를 읽어야 한다는 뜻이다. 이 글은 신뢰구간 뜻과 공식이 어디서 나오는지, 1,000명 조사에서 3.1%포인트가 어떻게 계산되는지, 사람들이 흔히 잘못 읽는 지점은 무엇인지, 광고 실험과 평균 추정에는 어떻게 쓰는지를 계산 과정과 함께 정리한다.

신뢰구간 뜻 — 점 하나가 아니라 범위로 답하기

전국 유권자 4,400만 명의 생각을 알고 싶지만 전부 물어볼 수는 없다. 그래서 1,000명을 무작위로 뽑아 묻고, 그 결과로 전체를 추정한다. 이때 표본에서 나온 45%를 그대로 전체의 값이라고 말하는 것을 점추정이라 하고, 45% 주위에 폭을 두어 "이 범위 안에 있을 것"이라고 말하는 것을 구간추정이라 한다. 신뢰구간은 구간추정의 결과이고, 그 구간이 실제 값을 얼마나 자주 붙잡는지를 나타내는 숫자가 신뢰수준이다. 95%가 관행적으로 쓰이고, 더 엄격한 분야에서는 99%를 쓴다.

폭이 생기는 이유는 단순하다. 같은 방법으로 1,000명을 다시 뽑으면 이번에는 44%가 나오고, 또 다시 뽑으면 47%가 나온다. 표본마다 값이 흔들리는 폭을 미리 계산해 두고, 그 폭만큼을 점추정값 양옆에 붙인 것이 신뢰구간이다. 그러니 신뢰구간의 폭은 표본을 몇 명 뽑았는지, 그리고 응답이 얼마나 갈리는지에 따라 결정된다. 이 두 가지가 공식에 그대로 들어간다.

신뢰구간 공식은 어디서 나오는가

표본 비율이나 표본 평균은 표본을 충분히 크게 뽑으면 실제 값을 중심으로 종 모양의 정규분포를 따라 흔들린다는 것이 중심극한정리다. 정규분포에서는 중심에서 표준편차의 1.96배 안에 전체의 95%가 들어간다. 표본 비율의 표준편차, 즉 표준오차는 $\sqrt{p(1-p)/n}$이다. 여기서 $p$는 표본 비율, $n$은 표본 수다. 두 사실을 합치면 비율의 95% 신뢰구간 공식이 나온다.

$$\hat p \;\pm\; 1.96\sqrt{\frac{\hat p(1-\hat p)}{n}}$$

$\hat p$는 표본에서 나온 비율이고, 뒤의 항 전체가 오차한계, 기사에서 말하는 표본오차다. 1.96이라는 숫자는 신뢰수준 95%에 대응하는 값이라 신뢰수준을 바꾸면 이 숫자만 바뀐다. 90%면 1.645, 99%면 2.576이다. 평균을 추정할 때는 $\hat p(1-\hat p)$ 자리에 표본 분산 $s^2$가 들어가 $\bar x \pm 1.96\, s/\sqrt{n}$이 되고, 표본이 30개 미만으로 작으면 1.96 대신 t분포에서 읽은 조금 더 큰 값을 쓴다. 구조는 언제나 "추정값 ± (신뢰수준 상수) × (표준오차)"로 같다.

여론조사 오차범위 ±3.1%p는 어떻게 나오나

여론조사 기관은 응답 비율이 어떻게 나오든 미리 오차범위를 밝혀야 하므로, 오차가 가장 커지는 경우인 $p = 0.5$를 넣어 계산한다. $p(1-p)$는 $p$가 0.5일 때 0.25로 최대가 되기 때문이다. 1,000명이면 $\sqrt{0.25/1000} = 0.0158$이고, 여기에 1.96을 곱하면 0.031, 즉 ±3.1%포인트다. 표본 수를 바꾸면 오차범위는 다음과 같이 움직인다.

500명

95% 신뢰수준 오차범위 ±4.4%p. 신뢰구간 길이 8.8%p.

1,000명

±3.1%p. 대부분의 정치 여론조사가 쓰는 표본 크기.

2,000명

±2.2%p. 표본을 2배로 늘려도 오차는 1.4분의 1로만 준다.

4,000명

±1.55%p. 오차를 절반으로 줄이려면 표본이 4배 필요하다.

공식의 분모에 $\sqrt{n}$이 있기 때문에 표본을 4배로 늘려야 오차범위가 절반이 된다. 조사 비용은 표본 수에 비례해 늘어나는데 정밀도는 제곱근으로만 좋아지므로, 대부분의 기관이 1,000명 안팎에서 멈추는 것은 경제적인 타협이다. 반대로 원하는 오차범위에서 표본 수를 거꾸로 구할 수도 있다. ±2%포인트를 원하면 $n = (1.96 \times 0.5 / 0.02)^2 = 2{,}401$명이 필요하다.

두 후보의 격차를 읽을 때는 한 단계 더 주의해야 한다. 45%와 41%는 4%포인트 차이지만, 두 숫자 모두 ±3.1%포인트의 신뢰구간을 갖고 있어 41.9~48.1%와 37.9~44.1%가 겹친다. 언론과 선거여론조사심의위원회는 격차가 오차범위의 두 배인 6.2%포인트보다 작으면 "오차범위 내 접전"으로 표현한다. 두 비율의 차이에 대한 신뢰구간을 정확히 계산하면 오차한계는 약 ±5.7%포인트로 조금 좁아지지만, 4%포인트 격차가 뒤집힐 수 있는 범위라는 결론은 같다.

신뢰구간을 잘못 읽는 세 가지 방식

첫째, "실제 지지율이 41.9~48.1% 안에 있을 확률이 95%"라는 해석은 엄밀히는 틀렸다. 실제 지지율은 이미 정해진 하나의 숫자라 확률을 붙일 대상이 아니다. 95%는 방법의 성적표다. 같은 방식으로 100번 조사해 100개의 신뢰구간을 만들면 그중 약 95개가 실제 값을 포함한다는 뜻이고, 지금 손에 든 구간이 그 95개 중 하나인지 5개 중 하나인지는 알 수 없다. 일상에서는 "실제 값이 이 범위에 있다고 봐도 되는 구간"으로 읽어도 큰 문제는 없지만, 5%의 조사는 실제 값을 놓친다는 사실은 기억해야 한다.

둘째, 신뢰구간은 무작위 추출에서 생기는 흔들림만 계산한 것이다. 특정 연령대가 전화를 덜 받거나, 응답률이 10%에 못 미쳐 응답한 사람들이 전체와 다른 성향을 갖는 편향은 공식 어디에도 들어 있지 않다. 1936년 미국 대통령 선거에서 잡지 리터러리 다이제스트는 240만 명의 응답을 모으고도 결과를 완전히 틀렸다. 표본이 커서 신뢰구간은 아주 좁았지만, 잡지 구독자와 전화·자동차 소유자 명단에서 뽑은 표본 자체가 전체 유권자와 달랐기 때문이다. 좁은 신뢰구간은 정밀함을 말하지, 정확함을 보증하지 않는다.

셋째, 신뢰수준을 높이면 구간은 넓어진다. 99% 신뢰구간은 2.576을 곱하므로 95% 구간보다 1.31배 넓다. "더 확실하게" 말하려면 "더 두루뭉술하게" 말해야 하는 것이다. 어떤 자료가 99% 신뢰구간을 내세우면서 구간이 좁다면, 그만큼 표본이 크다는 뜻이지 방법이 특별히 정확하다는 뜻은 아니다.

생활 속 신뢰구간 계산 예시 — A/B 테스트와 평균

온라인 광고 두 개를 각각 2,000명에게 보여줬더니 A는 60명이 눌러 클릭률 3.0%, B는 80명이 눌러 4.0%가 나왔다고 하자. A의 표준오차는 $\sqrt{0.03 \times 0.97 / 2000} = 0.0038$이고 1.96을 곱하면 ±0.75%포인트라 신뢰구간은 2.25~3.75%다. B는 $\sqrt{0.04 \times 0.96 / 2000} = 0.0044$에서 ±0.86%포인트, 신뢰구간 3.14~4.86%다. 두 구간이 3.14~3.75% 사이에서 겹치므로, B가 정말 더 나은지 아직 단정할 수 없고 표본을 더 모아야 한다는 결론이 나온다. 겹침만으로 판단하는 것은 보수적인 어림법이지만 방향은 맞다.

평균도 같은 구조다. 배달 시간을 36건 기록했더니 평균 28분, 표준편차 6분이 나왔다면 표준오차는 $6/\sqrt{36} = 1$분이다. 95% 신뢰구간은 다음과 같다.

$$28 \pm 1.96 \times \frac{6}{\sqrt{36}} = 28 \pm 1.96 \;\Rightarrow\; 26.0 \sim 30.0 \text{분}$$

표본이 36건이라 정규분포 근사를 썼지만, 표본이 10건 안팎이면 t분포의 값을 써서 구간을 조금 더 넓혀야 한다. 요점은 "평균 28분"이라는 한 숫자보다 "26~30분"이라는 범위가 실제 배달 경험을 더 정직하게 말해 준다는 것이다. 나는 회사에서 처음 A/B 테스트 결과를 보고할 때 클릭률 3.0%와 4.0%를 그대로 비교해 B가 33% 더 좋다고 썼다가, 신뢰구간이 겹친다는 지적을 받고 표본을 두 배로 늘려 다시 돌린 적이 있다. 그 뒤로는 비율 하나를 볼 때마다 분모가 몇인지부터 확인하는 습관이 생겼다.

정리하면 신뢰구간은 "추정값 ± 1.96 × 표준오차"로 계산되는 범위이고, 1,000명 조사의 ±3.1%포인트는 $p = 0.5$와 $n = 1000$을 공식에 넣은 결과이며, 95%는 구간 하나의 확률이 아니라 방법이 실제 값을 붙잡는 비율이다. 숫자 하나가 아니라 범위를 읽는 습관이 여론조사, 광고 실험, 평균 통계를 오독하지 않는 가장 단순한 방법이다.

함께 읽으면 좋은 글

여론조사 표본오차 계산법과 오차범위 해석하는 법 표본오차 뜻과 계산법, 표준오차와 차이까지 정리 큰 수의 법칙이란? 뜻과 예시, 도박·보험에 숨은 원리 중심극한정리 뜻과 증명, 표본 30개의 이유

참고 자료

Wikipedia — Confidence interval Wikipedia — Margin of error 중앙선거여론조사심의위원회 — 선거여론조사 결과 공표 기준 Wikipedia — The Literary Digest (1936 여론조사 실패 사례)