선거 여론조사가 승자는 맞혔지만 후보 간 실제 득표율 차이는 작게 예측했다면, 오차가 어디에서 생겼는지 어떻게 알아낼 수 있을까?
설문에 응답한 사람과 실제로 투표한 사람의 구성이 얼마나 달랐는지 비교하면 무엇을 알 수 있을까?
설문에 응답한 사람과 실제로 투표한 사람의 구성이 얼마나 달랐는지 비교하면 무엇을 알 수 있을까?
응답자와 실제 투표자의 구성을 비교하면 대표성·투표율 예측 오류를 점검할 수 있지만, 오차의 원인을 모두 밝힐 수는 없다.
승자를 맞혔더라도 후보 간 격차를 작게 예측했다면, 집단별 구성 비율과 집단 내 후보 지지율을 나누어 살펴봐야 한다.
연령·성별·지역·학력·정당 지지 등으로 집단을 나누고, 조사에서 가중치를 적용한 비중과 실제 투표자 비중을 비교한다. 단순 응답자 비중보다 최종 예측에 반영된 구성이 중요하다.
실제 승자를 많이 지지한 집단이 조사에 적게 반영됐다면 격차 과소예측의 한 원인일 수 있다. 여기에는 두 경로가 있다.
둘을 구별하려면 전체 유권자 구성과 검증된 투표 참여 자료도 필요하다.
조사에서 얻은 집단별 지지율은 그대로 두고, 집단 비중만 실제 투표자 구성으로 바꾸어 격차를 다시 계산한다. 실제 결과에 가까워진 만큼은 구성 차이와 관련된 오차로 해석할 수 있다.
남은 차이는 집단 내부의 응답자·비응답자 차이, 지지 후보 응답의 부정확성, 막판 표심 변화 등에서 생겼을 수 있다.
그렇지는 않다. 같은 연령·지역 안에서도 응답자와 비응답자의 정치 성향은 다를 수 있다. 또한 비밀투표이므로 개인별 실제 선택을 직접 확인하기 어렵다. 사후조사·투표 참여 검증·출구조사 등을 함께 활용하되, 각 자료의 오차와 표본 불확실성도 고려해야 한다.
여론조사 오차는 사후 검증을 통해 표본 구성, 부동층 이동, 투표자 선별 모델을 분해하여 진단하며, 실제 투표자와의 구성 차이 비교로 표본의 대표성 왜곡 여부를 밝힙니다.
정치학과 조사방법론 연구에 따르면, 선거 여론조사가 승패는 맞혔으나 후보 간 격차를 실제보다 좁게 추정한 경우, 오차의 원인은 대체로 세 단계의 사후 분석(Post-election evaluation)을 통해 규명할 수 있습니다.
미국여론조사협회(AAPOR) 등 조사 방법론 학계에서는 여론조사 오차를 크게 세 가지 지점에서 검증합니다.
선거 후 발표되는 공식 투표 통계(선거인명부 기록, 사후 행정 데이터, 출구조사 등)와 사전 조사 표본을 대조하면 다음과 같은 사실을 구체적으로 파악할 수 있습니다.
결국 두 집단의 구성을 비교하는 작업은 '표본 추출 및 보정'의 오류와 '유권자의 심리적 변심(샤이 유권자나 막판 이동)'을 분리해 냄으로써, 격차 축소 왜곡이 데이터 수집 단계의 구조적 문제였는지 유권자의 행태 변화 때문이었는지를 명확히 규명하는 핵심 도구가 됩니다.
오차는 표본 구성 차이와 집단 내 선호 차이로 분해해 추적하며, 응답자와 투표자의 구성 비교는 앞쪽 원인만 가려낸다.
먼저 한 조사만의 문제인지 확인합니다. 여러 조사가 같은 방향으로 틀렸다면 표본추출 우연(무작위 오차)보다 체계적 편향일 가능성이 큽니다. 또 득표율 '차이'의 오차는 각 후보 득표율 오차의 합에 가까워서, 개별 득표율보다 두 배가량 크게 나타나기 쉽습니다.
그다음 설문 과정을 단계별로 점검합니다.
연령·성별·지역·학력 등의 분포를 선거인명부, 투표자 파일, 출구조사, 사후 검증 조사와 비교합니다. 이어서 반사실적 재가중을 해 봅니다. 조사 응답을 실제 투표자 구성에 맞춰 다시 가중했을 때 예측이 실제 결과에 가까워지는지 보는 것입니다.
같은 응답자를 선거 후 재접촉하는 패널 자료가 있으면, 지지를 바꾼 사람과 투표하지 않은 사람을 직접 구분할 수 있습니다.
따라서 이 비교는 원인을 확정하기보다 후보를 좁히는 진단으로 쓰고, 조사 시점별 추이와 사후 검증 자료로 교차 확인하는 것이 안전합니다.