데브기어문효섭이사 0
1. 데이터거버넌스? 2. 엠바카데로데이터거버넌스 3. 당신의데이터에대한이해 4.Data Lineage 5.Embarcadero Connect 1
데이터거버넌스? 정의 비즈니스가치를식별하고향상시키기위한정보관리의정책, 권리이며책임을기반으로하는실천이다. 미션 기업의규정준수지원및의사결정관련정보의신뢰성을제공 이익 이익증가, 비용절감, 위험감소 2
데이터거버넌스? 3
데이터거버넌스? 무엇부터시작해야할지아직도모르겠어! 4
데이터거버넌스? DG 를시작하기전에반드시해야할 5 가지! 1 2 3 4 5 당신의데이터에대한이해 : 무엇을알고있고, 무엇을알지못하는지파악하라 데이터거버넌스, 스튜어드쉽, 모델링, 품질에대한훈련 약점을찾고, 그것에대해아는지식을보여줘라 당신이그것들을필요로하기전에프로세스확산과예외를식별하라 개발과배포솔루션의자연스러운한부분인것처럼데이터거버넌스를포지셔닝하라 출처 : Karen Lopez InfoAdvisors 5
데이터거버넌스? 엔터프라이즈데이터트랜드 엔터프라이즈데이터의볼륨, 다양성, 리프레쉬증가 30% - 50% year/year growth (IDC) 효율적으로활용되는엔터프라이즈데이터의비율감소 5% of all Enterprise data fully utilized (Forrester) 데이터의오해및미준수로인한위험증가 $600bn/annual cost for data clean-up in U.S. 6
데이터거버넌스? 엔터프라이즈데이터의다양성급증 7
데이터거버넌스? 도전과기회 나쁘거나지저분한데이터에대한비용은미국에서연간 600B $ 를초과 출처 : TDWI 데이터품질향상으로 66% 의수익증가 출처 : Sirius Decisions 사일로데이터및빈약한통합으로인한유용하지않은 95% 의엔터프라이즈데이터 출처 : Forrester 포춘지 1000 대기업은 10% 의데이터유용성증가로평균 2.01B $ 의수익증가 출처 : University of Texas 8
엠바카데로데이터거버넌스우리의데이터거버넌스관점 중대성 IT 거버넌스, 기업거버넌스보장및지원의핵심 미션 : 신뢰할수있는기업규정준수지원관련정보, 의사결정및통제제공 모바일, 클라우드, 빅데이터는지속적으로데이터의볼륨, 속도, 다양성을드라이브한다. 실용성 실용적인접근법 스프롤 (sprawl) 수용 ERP 와 DW 통합을통해복잡성을해결하는자격을갖춘성공 복잡성인정 조정을하는대신통합하지않는다. 오해 추상적이다 복잡하고고비용소요 명확하지못한 ROI 9
엠바카데로데이터거버넌스성숙도모델 Ungoverned [ 모름 ] 특성 : 데이터베이스스프롤 / 무정부, 폐쇄적인정보, 자동화격차이슈 : 중복, 불일치, 지출과다, 데이터신뢰성부족, 테크놀로지이니셔티브에초점을맞춘 IT Established [ 프로젝트통제 ] 마일스톤 : 자문위원회 ; 정책기반기술및방법론표준화 ; 주요역할수립 ; 이니셔티브기반독립적인프로젝트이익 : 증식정지 ; 데이터활용, 재활용성증가 Advanced [ 조정노력 ] 마일스톤 : 정형화된조직, 합리적인데이터, 적극적인공유 ( 예, MDM, Customer 360); 지표수립 ; 목표설정이익 : 중복및불일치감소 ; 경쟁력향상 Governed [ 지속적인향상 ] 마일스톤 : 기업문화에포함, 지속적인개선측정이익 : 비용통제, 품질정의, 신뢰성향상, 경쟁력으로써의데이터 ; 비즈니스에초점을둔 IT 10
엠바카데로데이터거버넌스스프롤 (Sprawl) 수용 Ungoverned [ 모름 ] 특성 : 데이터베이스스프롤 / 무정부, 폐쇄적인정보, 자동화격차이슈 : 중복, 불일치, 지출과다, 데이터신뢰성부족, 테크놀로지이니셔티브에초점을맞춘 IT Scoped [ 위험경계선 ] 마일스톤 : 프로세스, 시스템및데이터의인벤토리발행이익 : 위험경계선 ; 기회와우선순위식별 ; 자산 발견가능한 Established [ 프로젝트통제 ] Advanced [ 조정노력 ] Governed [ 지속적인향상 ] 마일스톤 : 자문위원회 ; 정책기반기술및방법론표준화 ; 주요역할수립 ; 이니셔티브기반독립적인프로젝트이익 : 증식정지 ; 데이터활용, 재활용성증가 마일스톤 : 정형화된조직, 합리적인데이터, 적극적인공유 ( 예, MDM, Customer 360); 지표수립 ; 목표설정이익 : 중복및불일치감소 ; 경쟁력향상 마일스톤 : 기업문화에포함, 지속적인개선측정이익 : 비용통제, 품질정의, 신뢰성향상, 경쟁력으로써의데이터 ; 비즈니스에초점을둔 IT 11
엠바카데로데이터거버넌스거버넌스갭 (Gap) Data Governance Organizations, Policies, Processes, Metrics Applications & Data DEV MDM ETL DQ Information Management 12
엠바카데로데이터거버넌스아키텍처가격차를해소할수있는가? Data Governance Organizations, Policies, Processes, Metrics Architecture Assessment, Planning, Standards, Alignment Applications & Data DEV MDM ETL DQ Information Management 13
Metadata Governance Enterprise Information Map Embarcadero Connect 엠바카데로데이터거버넌스메타데이터거버넌스와신디케이션 ( 거버넌스와아티텍처연결 ) Data Governance Organizations, Policies, Processes, Metrics Web Architecture Assessment, Planning, Standards, Alignment Applications & Data DEV MDM ETL DQ Information Management API Connect 14
Metadata Governance Enterprise Information Map Embarcadero Connect 엠바카데로데이터거버넌스데이터거버넌스플랫폼 ( 메타데이터제공신디케이션 ) Data Governance Organizations, Policies, Processes, Metrics Web ER/Studio Architecture Assessment, Planning, Standards, Alignment RAD Studio DB PowerStudio Applications & Data DEV MDM ETL DQ Information Management API 아키텍처와모델링응용프로그램개발 SQL 개발 DB 관리 DB 최적화 DB 변경관리 Connect 15
엠바카데로데이터거버넌스구성원, 프로세스, 테크놀러지연결 (DG 기초제공 ) Data Governance Organizations, Policies, Processes, Metrics Connect, ER/Studio, DB PowerStudio, RADStud io Metadata Governance Metadata Integrated SDLC Tooling Metadata Syndication 아키텍처와모델링응용프로그램개발 SQL 개발 DB 관리 DB 최적화 DB 변경관리 Applications & Data DEV MDM ETL DQ Information Management 16
엠바카데로데이터거버넌스데이터거버넌스구축 Data Quality Data Architecture Data Development IT 도전 Evolving Database Ec osystems Volume, Velocity, Variety Agile Development Cycles Meta Data Enabling Governance Data Operations Compliance Organizational T ransparency Maximizing IT I nfrastructure Document & Content DWusing & BI Reference & Master Data Data Security 출처 : Data Management International (www.dama.org) 비즈니스와데이터연결 ER/Studio CONNECT DB Powerstudio Meta Data Information Management Platform Data Architecture Data Development Data Operations 17
당신의데이터에대한이해일반적으로필요로하는, 추적가능한데이터 물리적정보 재고시스템의 "SALES_TOT 숫자 모델링툴에서의 "Total Sale" 속성 ETL / DW 정보 변환 / 계산 "Total Sales" = US$( 이탈리아판매 ) + US$ ( 한국판매 ) + SUM( 미주지역판매 ) 정의 업무정보 "Total Sales 은국가별지역별상품의판매가완료된모든분기별매출액의합 비즈니스룰 / 기업정책 "Total Sales 은도매상품은계산하지않는다. "Total Sales" 스튜어드쉽 / 사용 Mary, 데이터관리자, 업무정의 John, DBA, 물리정의유지관리수익성정보를참조하는회계부서 관련문서 : 텍스트문서, 스프레드시트등 18
당신의데이터에대한이해기업자산 = 데이터 ( 그리고메타데이터 ) 제품번호를이해할수가없다. 어느지역에서사용하지? 무슨제품을나타내는것이지? 수치를조정하는데왜이렇게오래걸리는가? "total inventory" 정의는? 완제품만포함된것인가? 이것은너무높게나타났는데어떻게계산된것인가? 19
당신의데이터에대한이해문서화되지않은데이터의발견 리버스엔지니어링및시각화를통한데이터소스의이해 access understanding benefit 리버스엔지니어링 & 도메인추정 영업 / 고객 DB 재무 & 회계 데이터아키텍트 마케팅 전자상거래 20
당신의데이터에대한이해리파지토리 (Repository) 에중앙화된모델 모든모델러, 개발자, DBA, 업무분석가에게이익확대 access understanding benefit access understanding benefit Data Architect DBA, 개발자, 업무담당자, 분석가등 databases 21
당신의데이터에대한이해보안과규정준수 혼란속 IT 규정준수 Industries Financial Services Healthcare/Pharma Federal Government Retail Energy Mandates Sarbanes-Oxley GLBA Basel III HIPAA Dodd-Frank PCI DSS State Data Breach Disclosur e Laws FISMA Int l. Data Privacy Laws FERC/NERC Guidance PCAOB COSO CobiT FFIEC ISO 17799 NIST 800-66 NIST 800-53 DoD STIG ITIL 22
당신의데이터에대한이해다른담당자간의사소통 임원및비즈니스이해관계자를위한 30,000 피트뷰 관리자또는아키텍트를위한 10,000 피트뷰 DBA 와개발자를위한 100 피트뷰 모델링팀 App, DB 개발자 DBA 업무분석가 관리자 23
Data Lineage ER/Studio Data Lineage Diagram 24
Data Lineage 엔터프라이즈데이터변환시각화및이해 ETL 소스로사용되는운영 DB 에대한데이터모델 ETL 소스로사용되는임시저장소 (staging) 에대한데이터모델 시각적인 DL 맵핑규격은복잡한 ETL 데이터흐름과변환 (transform) 을요약 ETL 의 Target 으로 사용되는 DW 에대한 데이터모델 ER/Studio DI Analyzer ETL 실제코드로부터요약된맵핑요구사항 25
Data Lineage 데이터리니지 시각적외부맵핑및소싱규칙 ETL/DI 툴에설계된소싱규칙및소스 - 타켓맵핑시각화 모델변경영향확인 리포팅 커스터마이징리포트 주요 ETL/DI 제품에대한사용자커스터마이징리포팅생성 테이블레벨리니지요약화와컬럼레벨데이터흐름문서화 ETL/DI 툴통합 여러가지 ETL 맵핑을단일인터페이스에통합 대표적인 ETL/DI 툴의맵핑요구사항을리니지모델에임포트 26
Data Lineage Web Portal 을통한손쉬운접근 임포트된모든 ETL 변환에대한검색, 리포팅, 문서화 ETL 사각지역제거 노동집약적인문서작업자동화 더쉬운데이터거버넌스리포팅 27
Data Lineage 28
Data Lineage 소스테이블기반 29
Data Lineage 목표테이블기반 30
Data Lineage 포탈을통한브라우징및탐색 32
Data Lineage 포탈을통한브라우징및탐색 33
Data Lineage 강력한검색 - 영향도분석 Search - example result set 34
Data Lineage Why ETL Metadata Manager 현재상황 ETL 툴은대용량데이터를이동함. 현재의데이터통합프로세스지식의대부분은 Tribal Knowledge 취약점 어렵고복잡한작업은데이터이동과변환에대한문서화이며그것들을소스와타겟간에묶는작업이다. 결과 이러한추적능력이없다면, 비정상적이고특이한상황의추적은점점커지고데이터거버넌스및연구활동은복잡하고시간소모적인활동이된다 ETL 메타데이터관리자는복잡한 ETL 변환을시각적인다이어그램으로임포트하고중앙저장소에서사용할수있도록합니다. 35
Data Lineage Metadata manager Benefits 멀티 -ETL 플랫폼시각화 다양한 ETL/DI 툴에대한데이터리니지를단일뷰에서표시 리스크감소 이러한시스템을연결하는 DB 와데이터플로우에대한손쉽고, 중앙화되고, 유용한문서를제공함으로써 Tribal Knowledge 감소 규정준수 직접정의되거나 ET/Studio 에임포트된기업표준맵핑규격을기존재하는 ETL 프로세스에서준수하는지모니터링 개발비용감소 업무분석가와 ETL 개발간협업및요구사항정형화향상 비정상징후빠른추적 어렵고시간소모적인질문에대한손쉬운답변 : ETL/DI 데이터플로우프로세스의데이터 이데이터가어디에서오는가? 36
Data Lineage All the leading DI Vendors Informatica PowerCenter 5-9 Microsoft SSIS 9.0-10.5 IBM DataStage 7.5-8.x Oracle ODI and OWB SAP Business Objects Data Integrator 11.7-12.x Microsoft Excel 37
Embarcadero Connect 현재상황 시스템과기술의다양성및변화가속, 볼륨증가는엔터프라이즈데이터의시야에복잡성을생성한다. 도전 복잡성은당신의데이터를찾을수없는모호함생성 모호함은의사결정과규정준수의민첩성을방해 솔루션 난해한정보를종식시키는핵심은메타데이터 효율적인정보관리와거버넌스의기초는메타데이터 38
Embarcadero Connect 엔터프라이즈데이터를더욱가치있게! Find Know Protect 39
Embarcadero Connect 스마트데이터거버넌스를위한 ER/Studio CONNECT DB Powerstudio Information Management Platform ER/Studio CONNECT DB PowerStudio CONNECT 통합 빅데이터와모바일데이터지원 향상된 Oracle/SQLServer 지원 확장된 ETL support 테크니컬아키텍처와비즈니스가치를관련시키는가이드 정의및분류체계구축을위한협업 메타데이터제공을위한검색및신디케이션기능 CONNECT 통합 인라인메타데이터 데이터소스리파지토리중앙관리 40
Embarcadero Connect CONNECT Makes Your Tools Smarter 민감한데이터에대한경고로규정준수유지 비즈니스정의알림 41
Embarcadero Connect CONNECT Enables Collaboration Over Data Tribal Knowledge 캡처 분류와연관 이해하기쉽게사용자정의 42
Embarcadero Connect CONNECT Metadata Governance & Syndication Governance and Collaboration Architecture Business Data Modeling Connect Web Connect Repository Syndication Technical Metadata Definition Structure Business Metadata Deployment SDLC & Information Mgt. Integrated Tooling Enterprise Data 43
Embarcadero Connect CONNECT Experts and Users with Collaboration tribal knowledge 와 siloed expertise 를캡쳐하고공유하여정보자산의더나은표현과이해가능 올바른데이터품질및이해이슈에대한협업기능을갖춘유일한플랫폼 44
Embarcadero Connect DB Powerstudio CONNECT Data Users to Data Insights 문맥과의미를제공하기위하여일상의워크플로우안에서데이터의이해통합 비즈니스용어와데이터요소에대한확장된이해를광범위하게제공하는유일한도구 45
Embarcadero Connect Business Definitions to Information Assets 정보자산을손쉽게찾을수있는비즈니스용어로더빠른통찰력구축 기존의메타데이터를활용하여정보자산에비즈니스용어를빠르게맵핑시켜주는유일한도구 46
데브기어 (www.devgear.co.kr) ask@embarcadero.kr 02-595-4288 47