국가통계품질향상을위한 조사과정자료의역할 임경은통계개발원조사연구실
Contents 1 2 조사과정자료소개 사례연구 3 4 분석개요및결과 향후과제
조사과정자료란? (Paradata/Process data) 조사를진행하는과정에서자연적으로발생되는파생자료 목적 : 조사가진행되는과정을객관적으로파악하고효율적으로관리 역할 : 조사표및조사방법의개선을유도하고, 조사과정에서발생하는 다양한오차들을축소 통계의품질향상에기여
조사환경의변화 I 조사진행과정에대한체계적인관리로조사의효율화, 통계의품질제고등다양한효과기대 조사환경악화 과도한조사업무스트레스 조사방법다양화 임시조사원활용 내부환경 외부환경 조사관련기술의비약적발전 불응증가로인한품질저하 조사의효율화요구증대 복합추정등관련연구진행
조사환경의변화 II 조사과정자료수집 조사환경악화 조사방법의다양화 조사관련기술의비약적발전 조사과정자료수집을위한도구및활용방안 조사환경변화 비표본오차축소를통한총오차 (Total error) 축소 조사과정자료활용 조사표개선및조사원교육 조사과정의효율화 응답률제고 ( 불응률축소 )
조사과정자료의총오차축소효과 I 총오차 오차의정의 통계조사에서발생가능한모든오차 총오차 표본오차 모집단의일부를표본으로추출하여조사를수행함으로써발생하는오차 비표본오차 포함정도, 무응답, 측정및처리과정등조사전반에걸쳐발생하는오차 표본오차 비표본오차 총오차 = 표본오차 + 비표본오차 ( 표본오차 << 비표본오차 )
조사과정자료의총오차축소효과 II 지금까지총오차를줄이기위한노력은이론적측정이가능한표본오차에집중 비표본오차를줄이기위한노력은체계화되지못함 비표본오차축소를통한총오차축소가반드시필요 포함오차 모집단간의불일치 측정오차 조사표, 문항, 조사방식등측정의결함 1 2 3 4 무응답오차 조사거절, 접촉불가, 불화, 질병 처리오차 입력오류등수집된자료의처리과정
조사과정자료와총오차의관계 출처 :Kreuter., Couper. & Lyberg(2010)
사례연구 ( 해외 ) 1 2 PANDA System( 미국 ) POINT System( 캐나다 ) 조사담당자에게조사의주요개념을명확하게전달 허위및부실조사에대하여엄중히경고 조사담당자들의자료수집활동에대한평가기준을수립 조사기술향상을위한교육에이용 3 4 NHIS( 국민건강면접조사 ) CHI( 조사이력표 ) 면접조사의효율성 조사과정에서발생가능한측정오차및무응답오차축소 조사시도성공및실패원인을패턴화하여현장조사원에게제공 응답자의조사거부사유, 조사수행성공전략, 무응답유형등을검토하여해결방안마련
PANDA System( 미국 ) 출처 : Frauke K. Paradata collection and its challenges(2012)
PANDA System( 미국 ) 출처 : Frauke K. Paradata collection and its challenges(2012)
NHIS( 국민건강면접조사 ) 출처 : http://www.cdc.gov/nchs/nhis/2010paradata.htm
CHI( 조사이력표 ) - NHIS
사례연구 ( 국내 ) 지방청자체과제 조사원교육 통계청의 조사과정자료 수집및활용 가이드라인 ( 11.5) 성과지표 지방청단위관리 중요성인식 통계청차원의관리 자료수집과관련된사후점검및관리체계개선 래포형성프로젝트 국제적관심고조 체계적조사관리 통계품질제고 조사과정자료수집을위한가이드라인제시 조사환경실태파악에대한중요성인지
2011 년조사과정자료관련사업 조사과정자료수집가이드라인 ( 조사기획과, 11.5) 에의하여, 각지방청에서는관련계획을수립하고, 조사과정자료를수집및분석 담당과 경인청 충청청 호남청 동남청 동북청 경제 1건 3건 2건 1건 3건 사회 2건 6건 2건 1건 4건 농어업 1건 4건 3건 1건 1건 공통항목 기본사항 ( 가구 / 사업체번호등 ) 응답자 / 조사원특성 불응여부, 방문횟수등 자료수집과정 ( 날짜 / 시간등 ) 응답성향 ( 협조 / 선호시간등 ) 모든지방청 경활조사 특성항목 가구 / 사업체위치및접근시간 응답자와의유대관계 조사업무스트레스 기관 / 조사에대한인식 응답참여이유및부담정도등 일부지방청
사례연구 ( 국내 ) 구분 수집항목 경제활동인구조사 조사종류 사회조사 불응 응답여부 ** O 응답거부사유 O 가구특성맞벌이여부 O O 자료수집방법 O O 조사일 O O 자료수집 조사시작시간 O O 조사완료시간 O O 조사완료까지방문 ( 접촉 ) 횟수 O O 조사협조도 O O 선호답례품 ( 금액및품목 ) O O 응답성향 선호조사방법 O
경활조사와사회조사의특성 목적및조사대상 ( 경활 ) 목적 : 국민의경제활동을조사하여관련정책수립및거시경제분석등에기초자료제공 대상 : 매월 15 일현재대한민국에상주하는만 15 세이상인자 목적및조사대상 ( 사회 ) 목적 : 사회구성원의주관적관심사를파악하여관련정책수립에기초자료제공 대상 : 기준시점에아파트및보통조사구내표본가구에상주하는만 13 세이상가구원 주요특성 ( 경활 ) 조사특성 주요특성 ( 사회 ) 경상조사 ( 매월조사 ) 연간조사 ( 매년조사 ) 연동표본제 ( 표본진입후 36개월조사참여 ) 확률비례계통추출법 ( 조사에한번참여 ) 정규조사원 ( 경험多 ) 임시조사원 ( 경험少 ) 조사문항이적음 조사문항이많음 표본가구에대한정보가많음 표본가구에대한정보가없음
조사과정자료수집항목 ( 공통 ) 경활조사와사회조사를대상으로수집된조사과정자료공통항목 ( 11.7) 구분 수집항목 조사종류 경활조사 사회조사 응답여부 O X 응답사항 응답거부사유 O X 자료수집방법 O O 조사일 O O 자료수집 조사시작시간 O O 조사완료시간 O O 방문횟수 O O 맞벌이여부 O O 조사협조도 O O 선호답례품 O O 가구및응답자 선호조사방법 O X 응답선호시간 O O 응답기피시간 O X
분석및비교 가구특성응답자특성조사특성 맞벌이여부 조사협조도 방문선호시간 선호답례품 조사방법 조사일 ( 요일 ) 조사시작시간 소요시간 방문횟수 맞벌이 조사방법 조사 ( 요 ) 일 시작시간 소요시간 방문회수 협조도 선호시간 답례품 맞벌이 O O O 시작 O / 접촉 면접 O & 전화 O O O O 조사방법 O O 시작 O / 접촉 면접 & O 전화 O O O O 조사 ( 요 ) 일 O 시작 O / 접촉 면접 O & 전화 O O O - 시작시간 시작 O / 접촉 면접 O & 전화 시작 O / 접촉 O O - 소요시간 면접 O & 전화 면접 O & 전화 O O O 방문회수 O O O O 협조도 O O O 선호시간 O - 답례품 O
조사기간 지방청경활조사사회조사조사기간경인청 7/16( 토 )~7/29( 금 ) 7/14( 토 )~7/29( 금 ) 충청청 7/18( 월 )~7/27( 수 ) 7/13( 금 )~7/29( 금 ) 호남청 7/17( 일 )~7/28( 목 ) 7/14( 토 )~7/29( 금 ) 동북청 7/17( 일 )~7/27( 수 ) 7/13( 금 )~7/29( 금 ) 동남청 7/16( 토 )~7/29( 금 ) 7/15( 일 )~7/29( 금 )
조사관련일반현황 조사수행결과 응답거부사유 경활조사에만불응자료존재!!
조사관련일반현황 주말조사비중 경활조사 사회조사 주중 주말 주중 주말 경인 93.9 6.1 59.6 40.4 충청 92.0 8.0 63.0 37.0 호남 95.9 4.1 63.2 36.8 동북 92.4 7.6 60.8 39.2 동남 95.8 4.2 63.1 36.9
조사관련일반현황 조사방법 방문횟수 경활조사 사회조사
조사관련일반현황 방문회수 방문횟수 경활조사 사회조사
조사관련일반현황 조사시작시간 소요시간 경활조사 (11 분 4 초 ) 사회조사 (36 분 55 초 )
응답자관련일반현황 맞벌이여부 응답선호시간
응답자관련일반현황 선호답례품 방문횟수 경활조사 (16,797 원 ) 사회조사 (12,545 원 )
맞벌이여부에따른차이 조사협조도 조사선호시간
조사요일별조사시작시간 경활조사 사회조사
조사일별조사협조도 사회조사 요일효과
조사요일별조사협조도 경활조사 사회조사
조사요일별응답선호시간 경활조사 사회조사
조사방법별조사시작 ( 접촉 ) 시간 사회조사 접촉시간 시작시간
응답자주도 조사방법별조사협조도 사회조사 조사원주도
조사방법별응답선호시간 경활조사 사회조사
자율항목에대한분석 ( 경활 ) 조사알리미서비스이용여부에따른방문횟수 (%) 60 조사알리미서비스이용 조사알리미서비스이용안함 50 50.8 47.0 40 30 20 10 0 31.9 19.2 19.1 13.3 9.0 2.9 4.3 0.8 0.1 0.2 1회 2회 3회 4회 5회 6회
자율항목에대한분석 ( 경활 ) 주택특성별조사비협조도 132 m2이상 14.8 다세대주택 33.3 99 m2 ~132 m2 4.9 연립주택 25.1 66 m2 ~99 m2 13.0 아파트 17.7 66 m2미만 10.5 단독주택 5.2 0 5 10 15 20 (%) 0 10 20 30 40 (%)
향후과제 조사과정자료는조사가진행되는동안자연스럽게발생되지만별도의 노력 없이얻어질수없다!! 조사의특성에따른조사과정자료수집항목설정필요 수집된자료로부터필요한정보발췌및활용 신뢰할수있는조사과정자료의수집활동
향후과제 조사과정자료수집 국가통계품질개선 다양한분석 조사과정개선 조사과정자료의체계적수집 ( 조사별특성반영 ) 조사과정자료분석 원자료와의연계를통한분석시행 분석결과활용의활성화 ( 조사표개선, 조사원교육, 업무계획등 ) 국가통계작성과정을체계적으로관리 총오차 ( 비표본오차 ) 축소를통한품질개선