Data Management 국립보건연구원임상연구지원 TF 길윤정연구원
목차 How to plan and conduct data management? - Database Design & Considerations - How to make a electronic Case Report Form(eCRF) - Data Validation
Data Management 조사된자료로부터결과를얻기위해시행되는일련의과정 DB 생성, 자료입력 ( 방법 ), 검증및확정과정, Medical Coding 등으로 구분 Data Management Data Validation Data Management 과정을통해전체적으로일관성있는 Data 수집목표 통계분석결과해석의타당성제공
Data Management Process Data Management 1 2 3 4 5 6 7 Data Management Plan Database Design Data Entry Data Validation Medical Coding Data Fix Data Lock/Unlock
Data Management Plan(DMP) Data Management Process 정의문서 연구에적용되는 SOPs과 Guideline 명시 과제담당자의규정 ( 자격 ) 과역할 산출물과문서화할내용에대한명시 Database Design Data Entry Rule Data Validation Rule Medical Coding SAE Reconciliation Data Quality Contrl(QC) Electronic Data Archiving
DMP 구성 준비단계 Document control Study personnel Timelines Communication and status reporting
Document Control/Study personnel Document Control DMP 작성자, 수정자, Version/ 수정일, 수정내용 연구참여자 : 의뢰자, DM팀, CRO, 연구자 /CRC Study personnel DM인력자격조건, 교육기록 이름, 역할과업무범위 Email, 주소, 연락처, Fax Staff 변경내역
Timeline Time & Quality Metrics draft DMP, approved DMP and revised DMP Database test and QC report Data check program and Test Start to issue Data Clarification Form(DCF) Final queries issued to site Coding Complete Data Quality Control(QC) Report
Communication and status reporting 연구수행전관련자들의합의와문서화 회의록작성기한 DM Status Report 보고시기, 보고자, 검토자, 수신자 DM 진행관련문서양식
DMP 구성 진행단계 Database Security & Backup Data Entry Non-CRF data upload Data validation Data Coding
Database Design DB Structuring/Data Analysis CRF 각항목에변수명설정 코드리스트의코드명, 코드값일관성 입력유형 항목순서 개발내용문서화 추가및변경절차 Paper CRF, EDC(eCRF)
Data Entry(Paper CRF) Double Entry: 동일한 CRF 를다른사람이서로다른 DB 에입력 DB1 DB2 DB 에입력된내용을비교, 다르게입력된 Data 를찾아 CRF 를 확인후올바른 Data 로수정함 입력에참여하지않은제 3 의 Entry Staff 가점검
Data Entry(eCRF) EDC(eCRF) 전자자료가이드라인준수 : 임상시험전자자료처리및관리를위한가이드라인 ( 식약처 2012) 21 CFR Part 11, GCP & KCGP 등 Audit trail 허가받은사람만접근 주기적인백업
Data Validation DB에입력된자료에대한논리적오류또는불명확한값에대한오류를추출하여해결함으로써자료의정확성과신뢰성을부여하는과정 DMP에따라 DVP를구체적으로개발하며, DVP에의해 Data Cleaning이진행됨 DVP(DVS) : 쿼리항목, 쿼리내용, 오류메시지정의
Data Validation 범위 결측치 ( 동의여부, 연구대상자ID) 범위확인 ( 나이범위, Outlier) 논리적인오류확인 날짜순서 (ex: 투약시작일 < 투약종료일 ) 변수별 (ex: HT<WT, SBP<DBP) Study Specific 선정제외기준 연구중단기준
Data Validation Plan 항목 General items Missing value yes/no, NA/ND 내용 Derivation field ( 연령, 총점, 평균등 ) Spelling error logical sequence for date visit window Medical review Eligibility Inclusion Criteria Yes Pregnancy Test Exclusion Criteria 성별에따른검사여부 (CRF design 에따라확인 ) 미실시또는 NA( 연령확인 ) Yes No
Data Validation Plan 항목 Medical History Vital Signs Physical Exam 내용 지속 이나, AE 에기재됨 Exclusion criteria 신체기관분류에따른적절한증상명 발생일 < 임상약투여일 종료일 +1 년 (365 일 )< 임상약투여일 Outlier SBP<DBP or SBP-DBP<20 Abnormal 인경우, 소견누락 신체기관분류에따른적절한증상명 임상약투여전 Normal 임상약투여후 Abnormal : AE? Medical review Yes Yes Yes Yes Yes
Data Validation Plan 항목 Laboratory Prior/Conco mitant Medication 내용 Outlier Normal range check 정상 / 비정상오류 약물명 ( 성분명 ) 오류, 불분명한약어등 1일투여량오류 용법 / 적응증오류 투여종료일 < 투여시작일 임상시험종료일 < 투여시작일 병용금기약물 약물투여 병력 or AE확인 투여종료일 +90일 < 임상시험시작일 이상반응으로인한투여인경우, 투여기간 Medical review Yes Yes Yes Yes Yes Yes
Paper CRF 자료검증범위 연구대상자 ID : 중복여부확인, CRF 매장마다동일한정보가입력되어있는지확인 가독성 ( 표기및맞춤법확인 ) : CRF 에입력한자료의정보가읽기쉬운지, 표기법이틀린것은없는지? 결측치 : 기재가누락된항목은없는지, 필수항목은모두기재하였는지? 범위 : 정해진범위를벗어나는값이존재하는지? ex) 선정기준에연구대상자는만20세이상이라면, 범위를벗어난대상자확인
Paper CRF 자료검증범위 변수타입확인 : 숫자형변수에숫자 0 대신 문자 O 입력 변수형식확인 : 변수의입력유형, 날짜유형, 숫자입력패턴 논리적오류 : 과거력에상위항목 No 인데연관된하위항목에 Yes 입력
EDC 의 ecrf 사용시이점 자료입력오류최소화로정확한데이터수집가능 : 연구대상자ID 중복여부, 필수입력항목, 자동계산, 조건식설정, 자료입력허용범위, 자동체크, 입력되는자료유형 ( 패턴 ) 제한등 Query 생성 / 해결시간감소및 Audit trail 자동생성 DB에입력된자료를추출하여프로그램을이용한자료검증가능 기관별연구진행현황실시간파악및관리기능 실시간자료입력및이상반응보고용이
EDC 의 ecrf 사용시이점 모니터 (CRA) 와 PI/CRC가같은화면을보면서대화가능 CRF 인쇄 / 배포 / 회수 / 보관비용절감 각종 Report/CRF Documentation & 파일보관공간감소 연구비용및진행시간절감
Some Problems with EDC 시스템변경추가기능에대한재교육 웹환경또는 PC사양의속도영향 ID/Password 관리 Upgrade등의시스템정지발생
Data Validation Specification
Query Flow & Tracking Query Generation & Resolution Process 쿼리양식작성 쿼리전달 : email, fax 쿼리해결기한내에해결요청 쿼리답변에따른 DB editing 쿼리 Tracking Log Data Correction
Data Clarification Form(DCF)
Data Clarification Form(DCF) Resolution
DMP 구성 종료단계 SAE reconciliation Data Quality control(qc) Database Lock/UnLock
SAE reconciliation plan Central SAE DB vs. Study SAE DB : Two DBs with the same data 담당자 불일치해결시점 불일치해결항목 불일치해결절차 필요시쿼리등록
Quality Control(QC) 임상시험을진행하면서수집된자료를입력하고자료관리과정거치면서자료검증까지된자료를대상으로근거문서 (CRF, DCF등 ) 과비교하여오류가있는지확인하는과정 담당자 : 관련연구와독립적인인력 QC 내용과방법 QC 내용 : CRF 와 DB 검증, Query 답변과 CRF 수정 전수조사 vs 표본조사
Database Locking 입력된자료에대한정확성, 타당성, 완결성의검증및확인과정이완료되면데이터베이스에있는자료에대한어떠한수정, 추가, 삭제등을위한접근을할수없도록접근권한에대한제한을하는일련의절차및업무 DB Locking 시점, 담당자, 내부승인문서확인 DB Locking 전확인사항 모든자료수진, 쿼리해결 Data QC 및오류율문서화 SOP에따른모든문서와업데이트저장
Data Management Report( 자료관리보고서 ) DM 각단계별업무수행내역, 절차, 기간 SOP/GCP/DMP 변경내역 검토승인문서
How to Make a electronic Case Report Form(eCRF) 항목 과제관련송부자료검토 ecrf draft 작성 ecrf draft 검토및수정 ( 연구자회의 ) ecrf 구축 ecrf 테스트및과제구축 기간 1주 2주 1주 1주 2주 icreat 사용자온라인교육안내 - 과제오픈
과제구축과정확인사항 최종본의연구계획서와 Case Report Form(CRF) 를비교하여해당과제에서어떤데이터를어떻게수집하는지자료관리계획수립 연구계획서목적에맞게 CRF에해당항목유무 Primary end point, Secondary end point 항목유무 선정 / 제외기준그외명시된항목들이 CRF에있는지여부 추가적으로관련연구의최신동향또는기존에수행한과제의경험에비추어추가의견을제시하여과제를수행하는최선의 ecrf로구현이되도록의견제시
CRF
ecrf draft 작성방법 CRF Classification 선정제외기준의각항목을 CRF 내확인할수있는해당항목이있는지확인 코드리스트 ( 코드명, 코드값 ) 일관성 ex) (Yes=1, No=2), ( 예 =1, 아니오 =0) 자동계산가능한항목 상하항목에대한비활성화설정 숫자입력값 ex) 숫자입력값문자입력을방지하기위해패턴과 Min, Max 설정
DVS 검토항목 Eligibility evaluation Primary, Secondary end point End of Data Collection System 미지원기능 다중선택시조건식설정이불가한항목확인 Lookup조회시다른연구대상자 Data를선택했는지 ecrf 내시작일이종료일보다이후인지확인 ( 약물복용시작일 < 약물복용종료일 ) 생년월일이서면동의일보다이후인지확인 일정시작일이서면동의일보다이전인지확인
1-1. 필수여부설정 1 2
1-2. 조건식설정
1-3. 산술식설정 1 Total Dose = Taken Tablets 8ug = 18 8mg = 144mg 2 Compliance = (Taken Tablets / Provided Tablets) * 100 3 BMI = 체중 (kg) / 신장 (m 2 )
1-4. 조건식 + 산술식설정 1 2 LDL = Total Cholesterol - (TG/5) - HDL 조건 : TG < 400 일경우에만 LDL 계산
1-5. 코드값계산 총점 = 1.Value + 2.Value + + 11.Value
1-6. Data range 설정 최소값 / 최대값 / 최소값, 최대값
CRF 를 ecrf 로구현
ecrf draft ecrf 설계및테스트 증례기록지 Review
ecrf draft
ecrf 구축 증례기록지 Review ecrf 설계및테스트
Data validation of icreat ecrf 코드북
감사합니다