1 핵심솔루션소개 중복제거를통한차세대백업솔루션 : 한국이엠씨컴퓨터시스템즈
2 솔루션개요 백업데이터의획기적인절감 모든백업데이터의분석을통해반복되는동일데이터를소거 (Elimination of duplicate data) 백업데이터의압축 주기적인 Full 에서해방 Incremental forever 방식 초기한번 Full 백업과매일 Full 백업시점의 Incremental 백업이가능하며, 복구시복구미디어의혁신적인감소 백업데이터복제를통해백업서비스의가용성증대 백업데이터의가용성증대 AVAMAR Filesystem 을통해백업데이터에대한직접적인검색 / 공유 / 아카이빙 /Remote 복제등이가능 Commonality Factoring Technology Incremental Forever + De-duplication + Compression = Commonality Factoring Application Server with AVAMAR Plig-Ins Commonality Factored Application Server with AVAMAR Plug-Ins Compression De-duplication Incremental s AVAMAR Servers 검색 Data LAN
3 백업시스템기본구성도 Client / Server Architecture & Centralized Management Clients Network Data Store Management Databases Restore Data Nodes Enterprise Manager Unique Objects Servers Secure LAN / WAN Switch Desktop / Laptop Existing IP Wide Area Network Utility & Spare Nodes Administrator
4 중복제거동작원리 1. Sticky Byte Factoring Chunk 생성 (variable length size) 2. Compression 압축된 Chunk 생성 (50% 효율 ) 3-a. Hash Atomic Hash 생성 (20byte) 3-b. Composite Hash Composite Hash 생성 ( 반복 ) 3-c. Commonality Root Hash 생성 4. 존재여부확인 저장여부결정
5 Commonality Factoring 동작원리 US 특허 No. 6,810,398 시작 파일스캔 Step1-Sticky-byte Factoring 기술에의한 Chunk 생성 Step2- Simple 압축 50% 010001010101010100001011101010100010101010101010100101010010101000010011001000101000 1010100001010001111001010010001001101001000010100000100101 10100100001010000010100101010010100000010100101111100101101000010011110 3k 8k 25k 9k 6k 17k 12k 2k 4k 13k 5k 3k 9k 6k Step3a- 각 Chunk 에대한 Atomic Hashes
Commonality Factoring 동작원리 Step3a-Atomic Hashes Step3b- Hash 들을적당한개수만큼조합 Step3c- Root hash 가생성될때까지반복작업수행 Root Hash Copyright 2009 EMC Corporation. All rights reserved. 6
7 Commonality Factoring 동작원리 Step4: 서버로 Hash 의존재유무를질의하고있을경우 Hash 및백업정보만저장하고종료 Present? Yes
8 Commonality Factoring 동작원리 파일변경시 시작 파일스캔 Step1-Sticky-byte Factoring 기술에의한 Chunk 생성 Step2- Simple 압축 50% 010001010101010100001011101010100010101010101010100101010010101000010011001000101000 10101 1010100001010001111001010010001001101001000010100000100101 01101 10100100001010000010100101010010100000010100101111100101101000010011110 11001 3k 8k 20k 9k 6k 17k 12k 2k 4k 10k 5k 3k 9k 6k Step3a- 각 Chunk 에대한 Atomic Hashes
9 Commonality Factoring 동작원리 파일변경시 Step3a-Atomic Hashes Step3b- Hash 들을적당한개수만큼조합 Step3c- Root hash 가생성될때까지반복작업수행 Root Hash
10 Commonality Factoring 동작원리 파일변경시 3k 8k 20k 9k 6k 17k 12k 2k 4k 10k 5k 3k 9k 6k Step4: 서버로 Hash의존재유무를질의하고없을경우상위 Hash를계속비교 새로생성된 Chunk 백업 Save Data Present? Yes No
11 데이터감소율비교 5TB 의데이터백업시 데이터감소율 디바이스 / 타겟 2 배 압축 ( 표준테이프하드웨어 ) 2.5TB 20-50 배 타겟에서중복제거 (Data Domain, Quantum) 100 250GB 백업데이터가디바이스에전달되기전까지는일일네트워크대역폭및스토리지요구량감소없음 데이터감소율 소스에서전사적으로데이터중복을제거하는 100-150 배 300 배 500-600 배 파일시스템과데이터베이스혼용 33 50GB Windows 또는 UNIX 파일데이터 ( 일반적인실제사례에서달성한데이터감소율 ) 17GB Windows 또는 UNIX 파일데이터 ( 중복데이터가많은실제사례에서달성한최고의데이터감소율 ) 8GB 소스에서전사적으로백업데이터크기를줄인후네트워크를통해전송 일일네트워크대역폭및스토리지요구량대폭감소
12 원본데이터에따른중복제거율비교 백업데이터폭증의원천적차단 : 환경별중복제거효과 Data Type Amount of Primary Data Amount Moved Daily De-dupe Ratio Windows file systems 3,573 GB 6.1 GB 586:1 Mix of Windows, Linux, and UNIX file systems 5,097 GB 11.7 GB 436:1 Engineering files on NAS Filers ( backups) 3,265 GB 24.2 GB 135:1 Mix of 20% databases, 80% file systems (Windows and UNIX) 9,583 GB 80.0 GB 120:1 Mix of Linux file systems and databases 7,831 GB 104.2 GB 75:1 Source: EMC
13 자원사용율비교 전통백업 CPU 사용율 Network 사용율 Disk 사용율 주목할만한 CPU 영향감소 Give CPU cycles back to the applications 주목할만한 Network 사용율감소 Don t be a backup scheduling master 주목할만한 Disk I/O 감소 Give back to the application At the end of the day your production applications should control the size of your Virtual infrastructure is not strategic, it is a necessity don t let it control your Virtual infrastructure
14 혁신적인아키텍처 - EMC 장애에대비하여다중의보호방안제공 RAIN(Redundant Arrays of Independent Nodes) 아키텍처 각서버노드에디스크스토리지와 CPU 내장 온라인확장및성능향상을위한그리드아키텍처 서버노드페일오버및무장애 (Fault Tolerance) 기능제공 AVAMAR 서버노드 (2U) 각각디스크스토리지와 CPU 내장 온라인확장및성능향상을위한그리드아키텍처 매일무결성점검 디스크장애에대한 RAID 보호 Replication 시에도동일한중복제거기술이용 US 특허 No. 6,826,711
15 VMware 을위한 Vmware 를위한 Killer App 데이터전송량 95% 까지감소 백업시간 95% 까지감소 Less data, faster backups Disk 영향 95% 까지감소 NIC 사용량 95% 까지감소 CPU 사용량 85% 까지감소 Memory 사용량 50% 까지감소
16 NAS 백업을위한 NAS 고객의 #1 과제는짧은백업윈도우이다. 전통적인프로세스 주말 Full 백업과일일 Incremental Full 백업은종종백업윈도우초과 job 이실패하면비보호된데이터존재 or job 이계속되면업무중영향발생 Before Monday Tuesday Wednesday Thursday Friday Saturday Sunday Monday Tuesday Wednesday Thursday Friday Saturday Sunday 8:00 AM 9:00 AM 10:00 AM 11:00 AM 12:00 PM 1:00 PM 2:00 PM 3:00 PM 4:00 PM 5:00 PM 6:00 PM 7:00 PM 8:00 PM 9:00 PM 10:00 PM 11:00 PM Weekend Full Weekend Full 12:00 AM 1:00 AM Incremental Incremental Incremental Incremental Incremental Incremental Incremental Incremental Incremental Incremental 2:00 AM 3:00 AM 4:00 AM 5:00 AM 6:00 AM 7:00 AM 일일 Full 백업 전통적인방법에비해 10 배까지빠르다. Enables daily full backups and eliminates need for incrementals 짧은백업윈도우안에 Critical 한 NAS 데이터를보호한다. 파일, 디렉토리, 및 Full 시스템복구를위한즉각적인백업 With Monday Tuesday Wednesday Thursday Friday Saturday Sunday Monday Tuesday Wednesday Thursday Friday Saturday Sunday 8:00 AM 9:00 AM 10:00 AM 11:00 AM 12:00 PM 1:00 PM 2:00 PM 3:00 PM 4:00 PM 5:00 PM 6:00 PM 7:00 PM 8:00 PM 9:00 PM 10:00 PM 11:00 PM 12:00 AM 1:00 AM 2:00 AM 3:00 AM 4:00 AM 5:00 AM 6:00 AM 7:00 AM Full Full Full Full Full Full Full Full Full Full Full Full Full Full
17 원격지복제및암호화 EMC 손쉽게 DR 환경구성이가능하며데이터암호화로보안기능제공 고효율 : WAN을통한효율적인복제 (~300:1) Local 장애시리소스이동으로즉각서비스정상화 256비트 AES 암호화유연성 : 단방향, 양방향, 일대다, 다대일설정가능비동기식, 스케줄가능 Application Server With AVAMAR Plug-Ins Application Server With AVAMAR Plug-Ins Windows Linux Network AVAMAR Server Utility Node Storage Node WAN AVAMAR Server Utility Node Network Storage Node Windows Linux Unix Unix AVAMAR Console AVAMAR Console Datacenter DR/Remote Center
18 백업데이터의활용 EMC File System - 별도의복구과정없이데이터의직접조회로활용가치향상 일반네트워크파일시스템처럼데이터의직접적인액세스백업된데이터를복구하지않고즉각활용데이터의검색기능필요시 Copy & Paste로즉시복구
19 지원되는 Client OS 및 Application Module Client Operating Systems Supported Microsoft Windows Server 2003 Standard and Enterprise Microsoft Windows 2000 Server and Advanced Server Microsoft Windows NT 4.0 Server Microsoft Windows XP, XP Professional, Vista Red Hat Linux 8.0, 9.0 Red Hat Enterprise Linux 2.1, 3.0, 4.0 Solaris 2.6, 7, 8, 9, 10 SUSE Linux Enterprise Server 8, 9, 10 AIX 5.1, 5.2, 5.3 HP-UX 11.0, 11iV1, 11iV2 Mac OS X 10.4x Netware 6.5 Application Modules Microsoft Exchange 5.5, 2000, 2003,2008 Microsoft SQL Server7.0,2000,2005,2008 Oracle 9i, 10g, 10gR2 IBM DB2 8.2.x (EMC Celerra) DART 5.5 (Network Appliance) Data ONTAP 6.3, 6.4, 6.5, 7.0.4, 7.0.5, 7.0.6 VMware Infrastructure VMware ESX Server versions 2.5.3, 3.0.x, 3.5 = ESX client OS certified using RHEL 4 client (support within virtual machines depends on VMware support of COS) Novell Storage Services (NSS) OES 2
효과적인 적용환경 원격지사 / 지점운영환경 지사및지점별백업솔루션도입및운영부담없음 소스중복제거된데이터전송으로네트웍대역폭최소요구 중앙에서원격데이터통합관리 원격지간백업이중화를통한데이터관리가용성극대 원격지백업소산개선요구 원격지 Replication 을통한백업소산 다수서버의분산환경데이터센터 ( 파일 /DB 혼재 ) 다수의서버에서네트워크부하를줄여서빠른백업 / 복구수행 관리서버추가시 Application Module 의비용추가없음 중앙집중관리를통한관리부담경감및백업용량절감 다수의작은파일백업 ( 수천만개파일 ) 작고많은문서 / 사진 / 파일백업및그룹웨어에우수한성능 독보적인중복제거률을통하여빠르고신속한백업 / 복구지원 NAS 환경백업 를이용한중복제거백업 (1 억 2 천만개파일백업레퍼런스 ) NAS 원격지백업 PC 백업 개인사용자는언제어디서나편리하게 PC 를백업 백업데이터에대한통합관리및모니터링 Up to 10 times faster daily full backups and rapid, single-step recovery Copyright 2009 EMC Corporation. All rights reserved. 20 20
21 레퍼런스사례 해외 Morgan Stanley Qualcomm Adaptec 외 1000 여고객 국내 한전 우리은행 Topfield 복권위원회 SK Networks 서울산업대 서울천주교구 명지대학교 한양대학교 삼성중공업 Hynix 등 총 50 여개고객사
사례연구 원격지백업 DR 구축 낮은네트웍대역대를이용하여 원격백업 DR 구축 서울 서울 SAP Oracle 백업서버 LAN Tape Library 원격지백업소산회선비용투자절감중복제거율 99.7% 백업데이터 95% 감소 SAP Oracle DR 서버 WAN 타지역 100km / T1 1 회선 서버 Tapes Offsite 타지역 복구 백업대상 : SAP Oracle 500GB 백업매체 : Tape 재난복구 : 물리적으로 Tape 원격지소산 Tape 이동시분실및훼손위험성 1개월보관기준 : 15TB 백업데이터관리 500GB Daily Full backup : 8시간 (T1 라인 ) 원격지백업을위해 T1 라인 1회선사용 DeDup ratio : 97% 원격지 DR 서버에서데이터복구 1개월보관기준 750GB 백업데이터관리 백업데이터보관기준은 1 달동안주중 Incremental, 주말 Full 을수행함을예상함 Copyright 2009 EMC Corporation. All rights reserved. 22
사례연구 데이터센터분산환경 중복제거를이용한백업시간및성능극대화 UNIX, Windows 서버 UNIX / Oracle LAN Windows / MS-SQL 백업시간 80% 감소중복제거율 99% 백업데이터 88% 감소백업데이터즉시복구 LAN 서버 1 차백업 NetVault 백업서버 Tape Library NetVault 백업서버 Tape Library 2차백업 1.5 TB Full backup : 21 시간소요 File (1.2TB), DB (300GB) 8,000만개그룹웨어파일백업 / 복구어려움 1개월보관기준 12TB 백업데이터 TAPE 관리백업미디어재활용으로인한복구신뢰성의문 2벌의 TAPE 백업본유지로인한운영어려움 1.5TB Daily Full backup : 4 시간소요 DeDup ratio : 99% 2차백업 Tape 소산 : 기존장비재활용 1개월보관기준 1.5TB 백업데이터관리그룹웨어백업데이터즉시복구 백업데이터보관기준은 1 달동안주중 Incremental, 주말 Full 을수행함을예상함 Copyright 2009 EMC Corporation. All rights reserved. 23
24 사례연구 상호원격지백업 DR 구축 원격복제를통한상호원격지백업 DR 구축 A 기관 B 기관 SAN/LAN 백업 UNIX / Oracle 내부망 백업서버 LAN 백업 Tape Library 원격지백업소산중복제거율 99% 3 중백업구조 UNIX / Oracle 내부망 WAN 원격지복제 UNIX / Oracle 내부망 UNIX / Oracle 외부망 Tape Library UNIX / Oracle 외부망 UNIX / Oracle 외부망 1일백업용량 : 내부망 (3TB), 외부망 (1TB) 백업매체 : Tape (SAN/LAN 백업 ) 중복제거를통한백업시간감소재난복구 : 외부망백업부재 Tape 이동시분실및훼손위험성 4TB Daily Full backup : 1시간 E-SeoulNet 이용 (500Mbps) 1시간내복제완료 DeDup ratio : 99% 원격지 DR 서버에서데이터복구 3중백업구조구축 1차백업 : 로컬 서버 2차백업 : 원격지 서버 3차백업 : 로컬 TAPE 소산
25 사례연구 NAS 환경백업 10 시간걸리는 Full 백업을 4 시간으로, 반나절이상걸리는복구는즉시 A 관 B 관 A 관 B 관 NAS TSM 백업서버 Tape Library TSM 백업서버 NAS Tape Library 백업시간 60% 감소중복제거율 99% 백업데이터 88% 감소백업데이터즉시복구 NAS 1 차백업 A 관 1 차백업 B 관 2 차백업 서버 쌍방향복제 WAN NAS 1 차백업 B 관 1 차백업 A 관 2 차백업 40 TB CAD 데이터 Full backup : 10 시간소요 볼륨당 Full : 최대 6 시간 건당평균복구 : 1 시간 30 분 ( 볼륨내 240 만개파일보유 ) 소형다량의 CAD 파일과무한증가하는 Catalog DB 로빈번한백업의실패 CAD 데이터 6 개월보관요구수용불가 기존 백업수행시계속늘어나는백업윈도우 40TB Daily Full backup : 4 시간소요볼륨당 Full : 12분, 복구 : 즉시 AvFS로복구요청파일즉시복구 DeDup ratio : 99.5% 1차 ( 로컬 :12개월),2차( 원격 :1주일),3차(TAPE) 기존장비 TSM 재활용 : 3차백업소산
사례연구 다수의작은파일 / 이미지백업 수천만개의작은파일로인하여백업이어려운상황 Windows 클라이언트 Windows 클라이언트 LAN 백업서버 원격지백업소산회선비용투자절감중복제거율 99.5% 백업데이터 95% 감소 LAN 서버 Exchange, SQL Exchange, SQL, Oracle 백업용량 : 일일 Full 5TB DB 6시간, 파일 48시간이상백업매체 : Tape (LAN 백업 ) 백업대상 : Exchange, SQL 서버, 수천만개의이미지백업운영과제 - 수천만개파일환경에따른장시간백업시간소요 - 24시간이내복구목표실패에따라백업가용성심각성대두 Copyright 2009 EMC Corporation. All rights reserved. 5TB 에대한 Daily Full backup : 8 시간이내 애플리케이션및수천만개의이미지파일통합백업 DeDup ratio : 95% 서버당 8 시간이내풀복구수행 디스크백업환경구축을위한고성능 / 고가용백업인프라구현 26
사례연구 PC 백업사례 ( 제조사 ) 언제어디서나가능한 PC 데이터백업및효율적인운영환경 ERP 서버 애플리케이션서버 - 이동중개별 PC 백업 - 업무관련데이터에대한중앙관리 - 웹기반편리한백업 ERP 서버 애플리케이션서버 서버 PC Internet Offline Use PC 사용자 (130 여대 ) 기존백업환경 - 백업대상 : ERP 서버및애플리케이션서버 - 네트워크기반테이프백업운영 백업운영과제 - 자동화된 PC 백업요건대두에따라서버및 PC 통합백업솔루션필요 - 사용자의잦은출장요건에따라인터넷기반의편리한백업인프라요건대두 - 업무관련데이터에대한 Auditing 필요 Copyright 2009 EMC Corporation. All rights reserved. 백업환경 - ERP/AP 서버및 130 여대 PC 에대한통합백업수행 - 사용자가인터넷을통해이동중개별백업수행 - 파일시스템적용을통해백업데이터에대한직접억세스및활용 도입효과 - 전사적인중복제거를통한획기적인백업용량절감 - 복구과정을거치지않고백업데이터를직접조회및활용함으로업무생산성증대 27
28 사례연구 원격지사 / 지점운영환경 글로벌기업의원격지사 / 지점백업운영환경 백업환경 - 를통한일별풀백업수행후 WAN 구간을통한백업데이터매일복제 - 복구방안 : 이중화된백업체계 로컬 서버우선적용, 로컬장애시본사 서버사용 도입효과 - 저성능 WAN 환경에서도효율적인원격백업수행 - 백업데이터에대한중앙감시 (Audit) - 글로벌환경의전사적인중복제거구현을통한획기적인백업용량절감및이에따른백업 / 복구성능향상
29 백업성능개선사례 파일종류 용량 (GB) 기존백업시간 (Full 백업 ) 초기백업시간 스케줄백업시간 초기백업중복률 스케줄백업중복률 비고 S 사이미지 679 60 시간 51.6 시간 1.7 시간 24% 95.50% 단일스트림 S 대오라클 355.4 6 시간 13.7 시간 2.5 시간 73% 99% 단일스트림 D 시청 작은파일 1400 24 시간 22.5 시간 1.2 시간 47% 99.9% 멀티스트림 S 중공업 NAS 860 8 시간 16.6 시간 0.5 시간 52% 99.80% 백업
30 Why EMC 중복기술을통해기존백업의문제점을해결 백업량, 백업시간의획기적인절감 백업및복구의신뢰성및안정성 백업된데이터에대한일관성유지를위한 Daily 백업데이터검사 재난 (Power Down 등 ) 대비 Roll Back 할수있는 Checkpoint 생성 복구의편리성 File System 을이용한백업데이터의직접 Access 90% 이상을차지하는일반적인복구작업시복구효율이증가 다양한환경에서의효과적인백업구축 Many File 환경 ( 수백만 ~ 수천만 ) Vmware 환경 Internet 을통한백업환경 Remote office(wan) 환경등 DR 구성의편리성 자동화된백업데이터의소산 혁신적인복제기술을통한백업서비스의고가용성을증대 TCO 절감 기존백업 Infra 변경없이백업구축이가능 (IP Address, Network cable 등 ) 향후업무서버추가시혹은원격지복제시추가비용이없음 ( 백업 Agent,Application Module 등 ) 3 년간전통적인백업을사용할경우와비교하면 50% 이상의 TCO 절감
31 질의 / 응답