여론조사정확도와의상관관계에대한고찰 2011. 8. 24( 수 ) 2011. 8. 23( 화 ) 150-871 서울시영등포구여의도동 14-8 극동 VIP 빌딩 1102 호 tel 02.786.0409 / 786.2202 fax 02.786.2262 www.rsview.kr
< 목차 > 제 1 장 2010 년 6 ㆍ 2 지방선거쟁점지역여론조사결과비교 1) 경기도지사선거... 3 2) 충남도지사선거... 4 3) 강원도지사선거... 5 제 2 장 2011 년 4 ㆍ 27 재보궐선거쟁점지역여론조사결과비교 1) 강원도지사선거... 6 2) 분당 ( 을 ) 국회의원선거... 8 3) KT 등재ㆍ비등재응답자결과비교... 10 제 3 장 2011 년도주요정치현안 여론조사결과비교... 12 제 4 장선거여론조사오류유형및조사환경에대한고찰... 15
2010 년 6 ㆍ 2 지방선거쟁점지역여론조사결과비교 Ⅰ 경기도지사선거 [ 표 1] 여론조사결과와개표결과비교 후보지지율 김문수유시민심상정부동층 1~2 위격차 1 리서치뷰뷰앤폴 5.13 (D-20) ARS 1,457 5.0 95%±2.5 45.4 40.4 2.3 11.9 5.0 2 미디어리서치 KBS 5.24 (D-9) 1,000 17.1 95%±3.1 45.4 29.8 2.7 22.1 15.6 3 한국갤럽 YTN/ 조선일보 5.25 (D-8) 513? 95%±4.4 49.4 29.7 2.8 18.1 19.7 4 개표결과 (6 월 2 일 ) 52.2 47.8 4.4 [ 표 1] 은김진표. 유시민후보단일화가끝난후공표됐던 3 개기관의조사결과를정리한것입니다. [ 표 1] 에서확인할수있는것처럼 5 월 13 일 리서치뷰 조사는 5.0% 였습니다. 특히이조사결과는경기도지사선거와관련해언론사와조사기관들이공표한수많은조사결과중에서 김문수후보가유시민후보를오차범위안에서조금앞서고있으나, 치열한접전이예상된다 는거의유일한조사였습니다. 또선거당일방송 3 사출구조사를제외하면위 5 월 13 일 리서치뷰 조사결과가두후보의실제득표율격차에가장근접했던조사였습니다. 즉, KT 전화번호부에의존하던 표집틀 의한계가있었음에도불구하고, 이높을수록정확도가높아지는것이아님을알수있습니다. <YTN 과조선일보는해당조사결과를보도하면서을공개하지않았음 > -3-
Ⅱ 충남도지사선거 [ 표 2] ARS 조사기관조사결과 후보지지율 박해춘안희정박상돈기타 1~2 위격차 1 더피플한겨레 5.15 (D-18) ARS 1,202 4.9 95%±2.8 16.7 27.8 32.2 23.3-4.4 2 리서치뷰뷰앤폴 5.26 (D-7) ARS 1,009 5.1 95%±3.1 18.7 36.3 33.8 11.1 2.5 3 개표결과 (6 월 2 일 ) 17.8 42.3 39.9 2.4 [ 표 3] 조사기관조사결과 [ 표 2] 는을공개한 2 개기관의조사결과이며, [ 표 3] 은조사결과입니다. 조사결과를보도한언론사들이 을대체로공개하지않아확인할수가없었습니다. 조사기관들의이대체로두자릿수인점을감안하면과조사결과의정확도에특별한상관관계를확인할수없습니다. -4- 후보지지율 박해춘안희정박상돈기타 1 미디어리서치외방송 3 사 5.14~16 (D-17) 800 15.3~24.1 95%±3.5 16.0 27.8 23.9 32.3 3.9 2 미디어리서치한국일보 5.22 (D-11) 600? 95%±4.0 17.2 27.7 24.9 30.2 2.8 3 한국갤럽조선일보 /YTN 5.25 (D-8) 505? 95%±4.4 18.7 27.6 22.4 31.4 5.2 4 코리아리서치외방송 3 사 5.24~26 (D-7) 800? 95%±3.5 15.0 29.6 25.2 30.2 4.4 5 한국갤럽 YTN 6.2 (D-day) ( 예측조사 ) 37,000 ( 전국 ) 1~2 위격차?? 22.3 38.6 39.1-0.5 6 개표결과 (6 월 2 일 ) 17.8 42.3 39.9 2.4
Ⅲ 강원도지사선거 [ 표 4] ARS 조사기관조사결과 후보지지율 이계진이광재기타 1~2 위격차 1 한백리서치폴리뉴스 4.6 (D-57) ARS 1,000? 95%±3.1 50.7 40.4 8.9-10.3 2 더피플한겨레 4.30~5.1 (D-32) ARS 1,200? 95%±2.8 48.7 32.1 19.2-16.6 3 더피플한겨레 5.25~26 (D-7) ARS 1,500? 95%±2.5 48.7 38.9 12.4-9.8 4 리서치뷰뷰앤폴 5.26 (D-7) ARS 1,093 6.7 95%±3.0 51.8 43.1 5.1-8.7 5 개표결과 (6 월 2 일 ) 45.6 54.4 8.8 [ 표 5] 조사기관조사결과 2 코리아리서치센터외 2 곳 각기관들이조사결과를발표하면서조차제대로공개하지않아비교에어려움이있으나상대적으로이높은조사가이낮을수밖에없는 ARS 조사에비해정확도에있어특별한차이가없음을알수있습니다. -5- 후보지지율 이계진이광재기타 KBS,MBC,SBS 5.14~16 (D-17) 800? 95%±3.5 42.0 32.7 25.3-9.3 2 한국갤럽조선일보,YTN 5.24~25 (D-8) 500? 95%±4.4 48.2 27.7 24.1-20.5 3 코리아리서치센터외 2 곳 KBS,MBC,SBS 5.24~26 (D-7) 800? 95%±3.5 46.1 34.4 19.5-11.7 4 개표결과 (6 월 2 일 ) 45.6 54.4 8.8 1~2 위격차
2011 년 4 ㆍ 27 재ㆍ보궐선거쟁점지역여론조사결과비교 Ⅰ 강원도지사보궐선거 [ 표 6] 리서치뷰 ARS/ 여론조사결과 후보지지율 엄기영최문순황학수기타 1~2 위격차 1 리서치뷰뷰앤폴 2.26~27 ARS 1,132 6.5 95%±3.0 42.2 35.3 22.5-6.9 2 리서치뷰국민일보 4.9~10 ARS 1,212 6.5 95%±2.8 51.2 39.5 4.2 5.1-11.7 3 리서치뷰뷰앤폴 4.15~6 ARS 1,017 6.3 95%±3.1 47.8 43.2 3.2 5.8-4.6 4 리서치뷰뷰앤폴 4.18~20 ARS 1,540 6.5 95%±2.5 48.0 44.4 2.1 5.5-3.6 5 리서치뷰뷰앤폴 4.27 (08:00~18:00) ARS [ 예측조사 ] 2,751 10.0 95%±2.0 47.7 49.9 2.4 2.2 6 개표결과 (4 월 27 일 ) 46.6 51.1 2.3 4.5 리서치뷰 는선거일전에실시한선거여론조사에있어서국내최초로 (Random Digit Dialing) 기법을과감히도입하였고, 조사가기존 KT 등재번호에의존하던방식에비해정확도가획기적으로높아지는것을확인하였습니다. 기법은기존 KT 전화번호부에의존했던 표집틀 을무시하고, 해당지역에 임의전화걸기 를통해조사하는방식으로기존 표집틀 을약 2~3 배이상확장한기법입니다. KT 등재 ( 약 37~38%) Vs. 비등재 ( 약 62~63%) 선거당일예측조사의은 10.0% 였고, 선거일전에실시한 4 차례조사의은 6.3%~6.5% 로집계됐습니다. 특히 4 월 9 일조사부터는 투표하겠다 는적극투표층만을대상으로조사를진행했으며, 선거일예측조사는 이미투표했다 or 오늘투표할것 이라고응답한유권자에한해조사를진행하였습니다. 즉, 국내선거여론조사와관련해정확도를좌우하는가장큰변수중하나는 보다 표집틀 임을알수있습니다. -6-
[ 표 7] 조사기관조사결과 1 KBS KBS 3.13~14??? 50.5 29.0 후보지지율 엄기영최문순황학수기타 3.3 ( 배연길 ) 1~2 위격차 17.0-21.5 2 코리아리서치동아일보 4.4 700? 95%±3.7 45.4 28.3 26.3-17.1 3 TNS 리서치 강원지역 6 개언론사 4.9~10 1,500 19.4 95%±2.5 44.3 32.0 1.9 21.8-12.3 4 한길리서치폴리뉴스 4.13~14 700? 95%±3.7 40.5 26.8 2.3 30.4-13.7 5 중앙일보조사연구팀 중앙일보 4.14~16 700 18.9 95%±3.7 48.5 28.5 23.0-20.0 6 한길리서치매일경제 4.18~19 1,000? 95%±3.1 40.0 30.9 2.4 26.7-9.1 7 미디어리서치 KBS 4.17~19 8 TNS 리서치 강원지역 6 개언론사 4.18~19 1,000? 95%±3.1 42.2 33.1 2.9 22.0-9.1 1,500? 95%±2.5 48.7 34.5 3.7 13.1-14.2 9 코리아리서치동아일보 4.19~20 700? 95%±3.7 45.0 28.0?? -17.0 10 개표결과 (4 월 27 일 ) 46.6 51.1 2.3 4.5 대부분의언론사들이조사결과를공표하면서조차공개하지않고있습니다. 위 [ 표 7] 은지난 4 월강원도지사보궐선거와관련하여유력언론사와조사기관들이공표했던조사결과들입니다. [ 표 6] 의 리서치뷰 조사결과와비교하면현격한차이가있음을확인할수있으며, 역시 이높다고오류가감소하지않음을알수있습니다. 이상대적으로높은조사의오류가더큰것을확인할수있습니다. -7-
Ⅱ 분당 ( 을 ) 국회의원보궐선거 [ 표 8] 여론조사기관별조사결과 1 한국리서치중앙일보 3.1~2 2 리서치뷰국민일보 3.11~12 ARS 1,005 3 리서치뷰국민일보 4.7~10 ARS 1,062 후보지지율 강재섭손학규이재진기타 1~2 위격차 1,000? 95%±3.1 34.3 31.3 34.4-3.0 11.3 ( 단순 ) 1.9 ( 적극투표층 ) 95%±3.1 40.6 48.6 10.8 8.0 95%±3.1 43.0 49.7 7.3 6.7 4 한길리서치폴리뉴스 4.14~15 500? 95%±4.4 39.4 37.6 2.0 21.0-1.8 5 리서치뷰국민일보 4.17~18 ARS 1,044 1.9 ( 적극투표층 ) 95%±3.1 46.2 49.5 4.3 3.3 6 한길리서치매일경제신문 4.18~19 1,000? 95%±3.1 41.8 41.4 2.4 14.4-0.4 7 리서치뷰뷰앤폴 4.19~20 ARS 1,095 8 코리아리서치동아일보 4.19~20 9 한국리서치 YTN 4.27 대면면접출구조사 1.7 ( 적극투표층 ) 95%±3.0 40.1 54.9 5.0 14.8 500? 95%±4.4 41.9 39.6 18.5-2.3 3,000 95%±1.8 44.5 54.2 1.3 9.7 10 개표결과 (4 월 27 일 ) 48.3 51.0 0.7 2.7 분당 ( 을 ) 보궐선거와관련하여 리서치뷰 만일관되게손학규후보우세를전망했습니다. 특히후보가확정된이후부터는 투표할것이다 는적극투표층만을대상으로조사를진행했고 ( 투표하지않겠다 조사종료 ), 따라서이 1.7~1.9% 로매우낮지만유수의조사기관보다오류가작았습니다. -8-
[ 표 9] 4 ㆍ 27 재ㆍ보궐선거 예측조사 Vs. 출구조사 결과비교 리서치뷰 예측조사결과는두후보모두오차범위 (±2.0%P) 를벗어나지않았습니다. : 10.04% 한국리서치 출구조사는 투표를마친유권자대면면접조사 (3,000 명 ) 임에도불구하고, 두후보모두오차범위 (±1.7%P) 를벗어났습니다. 통상면접조사인출구조사은일반전화조사보다훨씬높을것임을감안하면과정확도의상관관계에특별한점을발견할수없습니다. -9-
Ⅲ KT 등재ㆍ비등재응답자결과비교 [ 표 10] 강원도지사보궐선거 : 10.0%( 적극투표층 ) NO 조사기관조사기간조사방식 KT 등재ㆍ비등재 후보지지율 1 엄기영 2 최문순황학수 2-1 1 리서치뷰 2011. 4. 27 (08:00~18:00) ARS [ 예측조사 ] 전체 2,751 47.7 49.9 2.4 2.2 등 재 비등재 972 (35.3) 1,779 (64.7) 59.4 38.3 2.4-21.1 41.4 56.2 2.4 14.8 2 개표결과 (4 월 27 일 ) 46.6 51.1 2.3 4.5 [ 표 11] 분당 ( 을 ) 국회의원보궐선거 : 1.7%( 적극투표층 ) NO 조사기관조사기간조사방식 KT 등재ㆍ비등재 후보지지율 1 강재섭 2 손학규기타 2-1 1 리서치뷰 2011. 4. 19~20 ARS 전체 1,095 40.1 54.9 5.0 14.8 등 재 비등재 245 (22.4) 850 (77.6) 58.4 34.7 6.9-23.7 44.2 50.9 4.8 6.7 2 개표결과 (4 월 27 일 ) 48.3 51.0 0.7 2.7-10-
[ 표 12] 전남순천시국회의원보궐선거 : 3.8%( 적극투표층 ) NO 조사기관조사기간조사방식 KT 등재ㆍ비등재 후보지지율 1 김선동허상만 2 조순용허신행박상철구희승박상철기타 1-2 [ 표12] 경남김해시국회의원보궐선거전야권단일후보적합도체 1,004 27.0 13.5 : 1.8%( 적극투표층 21.5 2.5 ) 9.2 16.8 4.2 5.3 5.5 1 리서치뷰 2011. 4. 22~23 ARS 등 재 비등재 357 (35.6) 19.0 17.6 23.0 3.4 9.0 17.9 3.6 6.4-4.0 647 (64.4) 31.4 11.3 20.7 2.0 9.3 16.2 4.5 4.6 10.7 2 개표결과 (4 월 27 일 ) 36.2 11.5 21.7 2.4 8.3 15.9 3.9 14.5 [ 표 13] 경남김해시국회의원보궐선거야권단일후보적합도 : 1.8%( 적극투표층 ) NO 조사기관조사기간조사기간 KT 등재ㆍ비등재 야권단일후보적합도 1 곽진업 2 김근태 3 이봉수기타 3-1 전체 1,179 29.9 15.0 40.8 14.3 10.9 1 리서치뷰 2011. 4. 7~10 ARS 등 재 비등재 313 (26.5) 866 (73.5) 35.1 14.1 37.1 13.7 2.0 27.9 15.4 42.1 14.5 14.2-11-
2011 년도주요정치현안 여론조사결과비교 [ 표 14] 아산정책연구원 1 리서치 & 리서치아산정책연구원 1.11~17 2 리서치 & 리서치아산정책연구원 3.10~16 3 리서치 & 리서치아산정책연구원 3.10~15 4 미디어리서치아산정책연구원 3.11 5 리서치 & 리서치아산정책연구원 5.19 [ 표 15] 리서치뷰 국정지지도 정당지지도 긍정부정한나라당민주당 980 22.0 95%±3.1 44.4 46.7 30.0 17.9 1,023 15.4 95%±3.1 39.2 50.4 28.0 16.8 1,000 23.9 95%±3.1 42.6 50.8 31.2 18.2 1,173? 95%±3.1 40.5 53.5 35.2 27.8 1,000? 95%±3.1 31.8 61.7 25.1 21.4 비고 가구전화 가구전화- 휴대전화 휴대전화 가구전화 1 리서치뷰 더좋은민주주의연구소 5.9~10 ARS/ 990 6.4 95%±3.1 30.7 64.1 국정지지도 정당지지도 긍정부정한나라당민주당 2 리서치뷰뷰앤폴 5.26~28 ARS/ 1,000 5.3 95%±3.1 29.4 65.5 30.6 31.5 3 리서치뷰뷰앤폴 5.26~28 ARS/ 1,000 5.1 95%±3.1 32.0 65.5 31.7 31.2 4 리서치뷰뷰앤폴 6.28~30 ARS/ 1,500 5.3 95%±2.5 34.2 62.0 33.3 27.7 비고 가구전화 가구전화 휴대전화 가구전화 -12-
[ 표 16] 여론조사 KT 등재ㆍ비등재그룹 응답결과등비교 이명박대통령국정운영평가 조사기간 조사방법 유효표본 KT 등재 KT 비등재 KT 등재 KT 비등재계긍정평가부정평가긍정평가부정평가 5. 26~28 ARS 274 명 (27.4) 726 명 (72.6) 1,000 명 42.0 51.5 24.7 70.8 6. 28~30 ARS 377 명 (25.1) 1,123 (74.9) 1,500 명 48.0 46.7 29.7 67.1 7. 22~23 ARS 416 명 (27.7) 1,084 명 (72.3) 1,500 명 50.7 45.2 36.0 60.1 8. 20~21 ARS 464 명 (30.9) 1,036 명 (69.1) 1,500 명 42.0 52.4 35.7 61.2 정당지지도 조사기간 조사방법 유효표본 KT 등재 KT 비등재 KT 등재 KT 비등재계한나라당민주당한나라당민주당 5. 26~28 ARS 274 명 (27.4) 726 명 (72.6) 1,000 명 41.2 25.2 26.6 33.9 6. 28~30 ARS 377 명 (25.1) 1,123 (74.9) 1,500 명 38.2 26.0 31.7 28.3 7. 22~23 ARS 416 명 (27.7) 1,084 명 (72.3) 1,500 명 42.1 23.3 35.1 26.9 8. 20~21 ARS 464 명 (30.9) 1,036 명 (69.1) 1,500 명 40.3 25.2 34.3 28.9-13-
제 19 대총선투표기준 조사기간 조사방법 5. 26~28 ARS 6. 28~30 ARS 7. 22~23 ARS 8. 20~21 ARS 유효표본 KT 등재 KT 비등재 KT 등재 KT 비등재계한나라당후보야권단일후보한나라당후보야권단일후보 274 명 (27.4) 377 명 (25.1) 416명 (27.7) 464명 (30.9) 726 명 (72.6) 1,123 (74.9) 1,084명 (72.3) 1,036명 (69.1) 1,000 명 34.3 48.2 22.5 60.9 1,500 명 35.0 42.7 28.6 54.1 1,500 명 42.1 40.6 30.9 49.4 1,500 명 33.4 42.0 31.1 48.9 제 18 대대통령선거가상대결 조사기간 조사방법 5. 26~28 ARS 6. 28~30 ARS 유효표본 KT 등재 KT 비등재 KT 등재 KT 비등재 KT 등재 KT 비등재계박근혜손학규박근혜손학규박근혜문재인박근혜문재인 274명 (27.4) 377명 (25.1) 726명 (72.6) 1,123 (74.9) 1,000 명 45.6 30.3 39.4 39.5 45.3 23.0 39.1 33.5 1,500 명 54.9 29.2 49.3 36.6 56.8 25.2 50.3 35.4-14-
[ 표 17] 선거여론조사오류유형에대한고찰 제 4 장선거여론조사오류유형및조사환경에대한고찰 구분사례비고 설문지 1 설문지 2 역대총선분석결과소지역주의가매우주요하게작용 출신지명시경대수 ( 괴산 ), 정범구 ( 음성 ) 정원헌 ( 음성 ), 김경회 ( 진천 ) 한명숙전총리추이조사기소후지지율하락 1 심무죄선고명시 [2009 년 10 월충북중부 4 군국회의원보궐선거 ] 구분조사방식 1 경대수 2 정범구정원헌박기수이태희김경회부동층 2-1 한국리서치 ( 09.10.14) 리서치뷰 ( 09.10.15) (700명) 19.9 18.7 1.4 1.7 0.6 11.4 46.3-1.2 ARS (500명) 25.5 36.4 6.4 2.5 2.8 17.6 8.8 10.9 최종개표결과 ( 09.10.28) 29.6 41.9 4.4 3.2 0.7 20.1 12.3 [2010 년 6 월서울시장선거 ] 구분조사방식 1 오세훈 2 한명숙노회찬부동층 1-2 리서치뷰 ( 10.04.09) ARS(1,006명 ) 37.6 39.2 7.9 15.4 --1.6 중앙일보 ( 10.04.12) (750명) 50.0 31.3 8.1 10.6 18.7 최종개표결과 ( 09.10.28) 47.4 46.8 3.3 0.6 할당표집 표본대표성 선거마다전체투표율과연령대별투표율이다름 대부분의조사기관들이인구통계학적할당표집 교육감선거는학부모들투표율이상대적으로높음 가구전화를받을확률이높은사람이투표할확률도높다 무직자, 주부, 노령층등과다표집에대한우려 [2011년 4월강원도지사보궐선거예측조사연령대별표본추출쿼터기준 ] 연령대별구성비 구분 19/20대 30대 40대 40 이하 50 이상 50대 60 이상투표자수구성비 ( 10. 6. 2) 11.4 16.5 24.0 51.9 48.1 21.3 26.8 선거인수구성비 ( 10. 12. 31) 17.0 18.0 21.2 56.2 43.8 19.2 24.6 여론조사에응답하는사람들은상대적으로정치고관여층 투표가능성이높다 ARS 정량조사를해보면직업별로특정계층이과다표집되지않는다 가구전화없이휴대전화만사용하는유권자는오히려투표참여율이낮을것으로추정된다 경제적으로안정적인계층의투표율이높다 제 17 대대선 : 서울평균투표율 62.9% 중랑 (60.4), 강북ㆍ금천 (60.5), 관악 (61.0) VS 서초 (66.3), 강남 (64.0), 송파 (64.9) -15-
[ 표 18] 선거여론조사환경비교 구분한국미국 선거권만 19 세이상전체유권자유권자등록제 표집틀 전화번호부 ( 한국마케팅여론조사협회등 ) 선거인명부등양도ㆍ대여ㆍ영리목적사용불가 유권자명부판매 (Survey Sampling 社등 ) 역대선거투표여부, 전화번호, 당적등상세정보관리 조사거절자재발신등을할경우엄청난저항재발신등을통해조사진행 개인정보개인정보보호법, 전기통신사업법등 - 선거여론조사의신뢰도제고를위한제언 1 공표ㆍ보도된모든언론사및조사기관의데이터를취합해서선거결과와비교평가및상시공개 2 공직선거법 제 108 조에서규정한여론조사결과공표기준을엄격하게적용 2 년이하징역또는 400 만원이하벌금 3 선거일전 6 일부터투표마감시각까지여론조사결과공표를금지한조항삭제또는완화 4 언론사자체여론조사보도준칙제정및준수 5 관계법규개정을통한전화번호부ㆍ이동전화번호등제공 보도또는공표목적의여론조사결과에대해서는사후비교검증을통해그정보를공개함으로써언론과소비자들이각조사기관들의신뢰도를인식할수있도록유도해함량미달의조사기관들이자연도태되도록환경을조성할필요 무책임보도를남발하는언론사에대해서는언론단체등이그정보를공개 -16-