조사연구 aim of this study is to find main cause of the forecasting error and bias of telephone survey. We use the telephone survey paradata released by N

Size: px

Start display at page:

Download "조사연구 aim of this study is to find main cause of the forecasting error and bias of telephone survey. We use the telephone survey paradata released by N"

경진 삼
6 years ago
Views:

1 조사연구 권 호 DOI 연구노트 2016 년국회의원선거전화여론조사정확성분석 Analysis of Accuracy of Telephone Survey for the 2016 National Assembly Elections 1)2) a) b) 주제어 선거여론조사 전화조사 예측오차 편향 대국회의원선거 We investigate the forecast error and bias of public opinion polls conducted for 20th national assembly elections in Korea. The

2 조사연구 aim of this study is to find main cause of the forecasting error and bias of telephone survey. We use the telephone survey paradata released by National Fair Election Survey Deliberation Commission and the measure of predictive accuracy(statistic ) proposed by Martin et el.(2005). By analyzing the 203 public opinion polls carried out in Seoul, Incheon and Gyeonggi province, we found that telephone survey method, period of poll, variation level of weights, and response rate are the factors to cause the forecasting error and bias in telephone survey. Key words : public opinion poll, telephone survey, forecasting error, bias, 20th national assembly election Ⅰ. 서론

3 년국회의원선거전화여론조사정확성분석

4 조사연구 Ⅱ. 여론조사정확성척도와분석대상여론조사

5 년국회의원선거전화여론조사정확성분석 log

6 조사연구 Ⅲ. 여론조사정확성분석결과 1. 지역별예측오차비교

7 년국회의원선거전화여론조사정확성분석 < 표 1> 지역별편향및예측오차 지역 편향비율 그림 지역별 의분포 그림 지역별 의분포

8 조사연구 2. 조사기관별예측오차비교 < 표 2> 조사기관별편향및예측오차 조사기관 편향비율 A B C D E F G H I M N

9 년국회의원선거전화여론조사정확성분석 그림 조사기관별 의분포 그림 조사기관별 의분포 < 표 3> 조사기관별 의 LSD 다중비교결과 조사기관 평균 그룹 M a E ab B bc G bcd N cde A cde D de F de H de I e C e

10 조사연구 3. 조사방법별예측오차비교

11 년국회의원선거전화여론조사정확성분석 < 표 4> 조사방법별편향및예측오차 조사방법 편향비율 ARS& ARS 그림 조사방법별 의분포 그림 조사방법별 의분포

12 조사연구 < 표 5> 조사방법별 의 LSD 다중비교결과 ( 수도권 ) 조사방법비교 차이 값 유의여부 ARS-ARS& ARS *** ARS ** ARS& *** ARS& *

13 년국회의원선거전화여론조사정확성분석 4. 조사시점에따른예측오차비교 < 표 6> 조사시점에따른편향및예측오차조사시점 편향비율 그림 조사시점에따른 의분포 그림 조사시점에따른 의분포

14 조사연구 5. 응답률에따른예측오차비교 < 표 7> 응답률에따른편향및예측오차 응답률 편향비율 5% % 10% % 15% %

15 년국회의원선거전화여론조사정확성분석 그림 응답률에따른 의분포 그림 응답률에따른 의분포

16 조사연구 < 표 8> 응답률에따른 의 LSD 다중비교결과 응답률비교 차이 값 유의여부 5% 5% 10% *** 5% 10% 15% *** 5% 15% *** 5% 10% 10% 15% % 10% 15% * 10% 15% 15%

17 년국회의원선거전화여론조사정확성분석 6. 가중치변동에따른예측오차비교 < 표 9> 가중치비에따른편향및예측오차 가중치비 편향비율

18 조사연구 그림 가중치비에따른 의분포 그림 가중치비에따른 의분포

19 년국회의원선거전화여론조사정확성분석 < 표 10> 가중치비에따른 의 LSD 다중비교결과 가중치비교 차이 값 유의여부 ** *** * *** *** *** *** DB 활용조사를제외한응답률및가중치에따른예측오차비교

20 조사연구 < 표 11> DB 활용조사를제외한응답률에따른편향및예측오차 응답률 편향비율 5% % 10% % 15% % 그림 활용조사를제외한응답률에따른 의분포

21 년국회의원선거전화여론조사정확성분석 그림 활용조사를제외한응답률에따른 의분포 < 표 12> DB 활용조사를제외한응답률에따른 의 LSD 다중비교결과 comparison difference -value sig. 5% 5% 10% *** 5% 10% 15% ** 5% 15% *** 5% 10% 10% 15% % 10% 15% % 15% 15%

22 조사연구 < 표 13> DB 활용조사를제외한가중치비에따른편향및예측오차 가중치비 편향비율 그림 활용조사를제외한가중치비에따른 의분포

23 년국회의원선거전화여론조사정확성분석 그림 활용조사를제외한가중치비에따른 의분포 < 표 14> DB 활용조사를제외한가중치비에따른 의 LSD 다중비교결과 comparison difference -value sig ** *** *** *** ** ***

24 조사연구 Ⅳ. 전국단위정당지지율여론조사분석

25 년국회의원선거전화여론조사정확성분석 그림 시간에따른척도 의변화추이 새누리당 더민주당

26 조사연구 그림 시간에따른척도 의변화추이 새누리당 국민의당

27 년국회의원선거전화여론조사정확성분석 그림 시간에따른척도 의변화추이 여당 야당 Ⅴ. 결론

28 조사연구 참고문헌 : (3): (4): 1-32.

29 년국회의원선거전화여론조사정확성분석 (1): (2): Bolger, G., D.W. Davis, C. Franklin, R.M. Groves, P.J. Lavrakas, M.S. Mellman, P. Meyer, K. Olson, J.A. Selzer, M.W. Traugott, and C. Wlezien An Evaluation of the Methodology of the 2008 Pre-Election Primary Polls. American Association for Public Opinion Research. Martin, E.A., M.W. Traugott, and C. Kennedy A Rewiew and Proposal for a New Measure of Poll Accuracy. Public Opinion Quarterly 69 (3): Mokrzycki, M., S. Keeper, and C. Kennedy Cell-phone-only Voters in the 2008 Exit Poll and Implications for Future Noncoverage Bias. Public Opinion Quarterly 73(5): Sturgis, P., N. Baker, M. Callegaro, S. Fisher, J. Green, W. Jennings, J. Kuha, B. Lauderdale, and P. Smith Report of the Inquiry into the 2015 British Gneral Election Opinion Polls. London: British Polling Council and the Market Research Society. Traugott, M.W. and W. Christopher The Dynamics of Poll Performance During the 2008 Presidential Nomination Contest. Public Opinion Quarterly 73(5): < 2016/08/18, 2016/08/27>

조사연구 sampling error of polling sites and the additional error which comes from non-response, early voting and second stage sampling error of voters in

조사연구 sampling error of polling sites and the additional error which comes from non-response, early voting and second stage sampling error of voters in 조사연구 권 호 DOI http://dx.doi.org/10.20997/sr.18.4.7 연구노트 2016 년국회의원선거출구조사오차분석 Analysis of Prediction Error of the Exit Polling for 2016 National Assembly Election in Korea 1) 3) a) b) c) 주제어 대국회의원선거 예측오차