[서울신문] 여론조사와 선거 결과 오차 커… 조사업체 ‘등급제’ 실시하자  기사 전문

이번 총선, 기존 이론·상식 벗어나 /선거일에 가까울수록 더 틀리고/ ARS보다 면접조사가 더 ‘배반적’/수도권 야당 우위 과대추정 심해

조사기관별 특정 정당 경향성...‘여론조사꽃’ 특히 민주당 기울어/ 중립적인 기관 주도로 업체 평가/예측력과 결과 분석… 등급 공개를

이번 총선은 여론조사 업계를 평가하는 중요한 무대였다. 그동안 누적돼 온 여론조사에 대한 불신이 그 바탕이다. 결과는 실망스러웠다. 상징적으로 ‘73억원짜리’ 출구조사가 신뢰구간 상·하한을 기준으로 최소 3석(KBS)에서 최대 9석(MBC)까지 벗어났다. 신뢰구간의 중간을 기준으로는 10석 이상의 차이였다. 지난 2000년 16대 당시 총선 출구조사가 도입된 이후 7번의 총선에서 딱 한 번 2016년 20대 총선 당시 방송 3사 중 두 곳이 신뢰구간 내에서 주요 정당 의석수를 맞힌 것을 제외하면 모두 틀렸다. 방송 3사가 총 21회(3사×7회) 시도해 2회 맞힌 것이다. 

뭐가 문제였을까. 올해 1월 이후 실시된 총선 후보 지지율 조사 713건 중 국민의힘(또는 개혁신당), 그리고 더불어민주당 후보가 1, 2위 득표를 한 161개 지역구에서 실시된 660건을 전수 분석해 보았다. 이번 총선에서 총 34개 업체가 지역구 지지율 조사를 여론조사심의위원회(여심위)에 등록했고 11개 업체가 전체 지역구 조사의 약 70%를 수행했다. 베이지언 계층모형(Bayesian Hierarchical Model)을 적용, 조사모드(면접조사 대 ARS)와 조사 시점, 지역 등의 요인을 고려해 후보 간 지지율 격차와 실제 득표율 격차 간 차이를 추정해 보았다. 또 조사기관별 경향성도 함께 추정했다.

이번 총선 여론조사는 기존의 이론과 상식을 벗어났다. 우선 선거일에 가까울수록 더 틀렸다. 기존의 정치학 이론과 배치된다. 정치학에서는 선거일에 가까워져 유권자들이 ‘펀더멘털’을 더 잘 인지하게 되면서 여론조사도 선거 결과로 수렴하는 것이 자연스러운 것으로 본다. 실제로 필자가 2016년 총선 당시 공표된 여론조사 674건 전수를 분석했을 때도 몇 가지 중요한 요인의 영향을 통계적으로 통제하면 선거일에 가까울수록 실제 득표율과의 오차가 줄어든 것으로 나타났다.