제품소개 분산파일스토리지솔루션
table of contents About U2N Products Use Cases
U2N Global No.1 Cloud Storage Solution Provider 회사명 대표이사 유투앤 오승 설립일 2011.5.31 주요경영진 직원수 권용우전무, 이철이사 15 명 클라우드스토리지솔루션 사업분야 클라우드기반블록스토리지서비스솔루션 빅데이터저장및분석솔루션 스토리지어플라이언스판매 소재지 경기안양시동안구평촌대로 243 KT 안양지사 5 층 3
U2N Tracks 연혁및주요활동 2011. 6 벤처기업확인 ( 기술보증기금 ) 7 소프트웨어사업자신고 ( 한국소프트웨어산업협회 ) 7 기업부설연구소설립 ( 한국산업기술진흥협회 ) 7 ETRI GLORY-CSS 기술이전 10 LG U+ 서버스토리지 (6PB) 상용화기술지원파트너 12 GLORY-CSS 기반분산파일스토리지솔루션 AionDisK TM 상용화 12 지식경제부산업융합원천기술개발사업참여 (WBS) 2012. 6 분산파일스토리지솔루션 의 GS 인증획득 6 지식경제부산업융합원천기술개발사업참여 (VDI) 9 AionDisk 솔루션라이선스납품 ( 엔써즈, imideo 서비스 ) 2013. 1 AionDisk 솔루션라이선스납품 ( 솔트룩스 ) 3 LGU+ U-CFS 운영관련기술지원파트너및운영관리시스템개발 8~12 AionStack 납품 (SK플래닛, 한국원자력안전기술원, 국방지형정보단등 ) 2014. 4~12 LGU+ UCFS 운영 ( 웹하드, U+Box) 7 LGU+ MAHA용운영관리시스템개발 8 KNN, 텔코웨어 AionDisk 솔루션라이선스납품 11 대구방송 AionStack 납품 12 대전방송 AionStack 납품 / 한국원자력안전기술원 AionStack 증설 2014. 2 GEO2 AionStack 납품 5 기상청 AionStack 납품 ( 레이더자료공동활용시스템구축용 ) 4
AionDisk by U2N 용량과성능의무제한선형확장을제공하는스케일아웃분산파일스토리지 비즈니스및 IT 기술의변화에따라발생한빅데이터라는비정형데이터의폭발적인증가는 1 스토리지의용량설정 2 데이터의특성에따른입출력성능확보, 3 데이터가용성보장, 4 기존응용서비스유지, 5 스토리지도입 / 증설 / 운영비용절감등의빅데이터저장에관한핵심이슈사항을발생. AionDisk는이러한이슈들을효과적으로해결할수있는 소프트웨어기반분산파일스토리지솔루션 Application Server Layer File Service Mail Service Music Service Movie Service Image Service Cloud Service CCTV Service Education Service Medical Service 대용량 / 고성능 Data IO 제공 Storage System Layer AionDisk Meta Node AionDisk Meta Node Meta Data S/W 기반솔루션 범용 x86 서버사용 단일볼륨제공 AionDisk Data Node AionDisk Data Node AionDisk Data Node AionDisk Data Node AionDisk Data Node Data AionDisk Data Node 편리한관리환경제공 수십 PB 급의스토리지용량확장가능 5
GLORY File System(by ETRI) 기술이전및제품화 Highly scalable, Highly available and High-performance Cluster File System GLORY-FS Client Filesystem Global Namespace GLORY-FS Client Filesystem GLORY-FS Metadata Server GLORY-FS Data Server GLORY-FS Data Server GLORY-FS Metadata Server ( 그림출처 : ETRI) 6
AionDisk 특장점 탁월한확장성, 고가용성, 안정성및경제성을보장하는분산파일스토리지솔루션 저장용량제한이없는 스케일아웃 기존응용시스템을 지원하는표준 API 저장공간수십 PB 이상으로지속적확장지원 데이터노드 (DS) 및메타노드 (MDS) 의클러스트링을통한성능향상 POSIX FS API 호환 Linux 클라이언트지원 윈도우 API 호환클라이언트지원 단일볼륨지원을통한 유연한시스템관리 편리한관리환경 GS 인증제품 (2012.6) 단일볼륨 / 다중볼륨구성지원 볼륨별쿼터및복제본수지정지원 데이터암호화 (AES-NI) 및데이터중복제거 커맨드 / 웹기반관리도구제공 다양한부하에대한일간 / 주간 / 월간 / 연간모니터링 HA 구성및데이터자동복제를 통한중단없는서비스 사용용도에따른 합리적인스토리지도입비용 메타노드의 HA 구성을통해메타데이터보호 데이터 2 중화 /3 중화기반데이터가용성보장 볼륨 / 디렉토리 / 파일별복제본수지정지원 사용목적에따라단일어플라이언스형태의소규모스토리지로도입가능 RAID 또는복제방식으로데이터보호방식선택가능 7
Capacity AionDisk Coverage EMC Isilon, HP IBRIX 등의글로벌분산 NAS 제품을대체하는용량과성능입증 100PB 10PB Parallel File System for HPC 1000TB Scale-Out Storage Lustre, Panasas, PVFS2, GlusterFS 100TB Google FS, HadoopDFS, Isilon, IBRIX GLORY-FS 10TB NAS/SAN Storage CIFS, NFS, AnyStore, Redhat GFS, Sanique 5TB Local File System 500GB NTFS, ext4 60MBps 2GBps 10GBps 100GBps 1000GBps I/O Performance 8
AionStack AionDisk 를최적의 X86 스토리지서버와통합한어플라이언스제품 분산파일스토리지솔루션인 AionDisk 의어플라이언스버전으로기본적인스토리지기능및확장성외에 스토리지성능, 안정성및관리편의성등을자체적으로보장하는제품 AionStack 및 AionDisk 확장방식동시지원 AionStack 구성예 Usable 20T( 복제구성시 ) Usable 28T(Raid 구성시 ) Usable 40T( 복제구성시 ) Usable 56T(Raid 구성시 ) Usable 100T( 복제구성시 ) Usable 140T(Raid 구성시 ) Usable 555T( 복제구성시 ) Usable 777T(Raid 구성시 ) Meta Node & Data Node Meta Node & Data Node Data Node + Data Node 무제한 Scale Out 지원 제약없는 Scale Out 지원메타데이터 HA 지원데이터가용성보장 ( 복제 /RAID) 서비스온라인상태에서 Data Node 증설로확장가능 9
Use Cases - 레퍼런스종합 업체명업체설명기간규모도입활용내용 LG 유플러스 국내 3 위이동통신사 (7 백만고객 ) 사용자수천만명의개인클라우드저장소서비스 2011.10 ~ 2014.12 30PB 이상 천만명규모의 U+Box 서비스 13 만명규모의웹하드서비스 UCFS 운영관리 (UCFS SM) MBC 한국 3 대공중파방송사중하나 2013.1 30TB 방송용대용량데이터아카이빙 한국전자통신연구원 정부산하연구소 2012.3 ~ 2014.2 416TB 엔써즈 이미지관련솔루션및서비스업체 2012.9 175TB 솔트룩스 시맨틱검색엔진및빅데이터인공지능솔루션제공 소셜매거진서비스업체 2013.1 100TB 사내프라이빗클라우드서비스용통합스토리지 이미지기반영상검색및공유인터넷서비스의컨텐츠저장 소셜매거진모바일서비스의컨텐츠저장 한국원자력안전기술원 Korea Institute of Nuclear Safety 2013.8 / 2013.11 / 2014.12 216TB 기상정보파일 / 발전소설비로그파일의아카이빙 10 국방지형정보단 SK 플래닛 제이씨스퀘어 Geospatial Information Agency of Korea Defense 국내 1 위이동통신사의자회사 디지털콘텐츠사업과통합커머스사업, 광고 NFC(RFID) 칩 / 모듈, 안드로이드어플리케이션및서비스개발업체 2013.12 72TB GIS 데이터아카이빙 2013.12 126TB ( 연간 60TB) GIS 데이터아카이빙 2014.1 18TB 사내 외업무용통합스토리지 문화재청 ( 포항오어사 ) 문화재보전및관리기관 2014.6 36TB 문화재보호용감시영상아카이빙 텔코웨어 유무선통신솔루션기업 2014.8 540TB KNN 부산광역시및경남지역방송사 2014.8 300TB 대구방송 대구광역시및경북지역방송사 2014.11 320TB 대전방송 대전광역시및충남지역방송사 2014.12 660TB 기상청 기상청레이터센터 2015.5 544TB SKT 모바일서비스용컨텐츠가공및캐시스토리지 방송용대용량영상데이터아카이빙및스트리밍서비스 레이더자료공동활용시스템관련통합스토리지
Use Cases - 인터넷서비스부문대규모 / 대용량데이터의저장및서비스제공을위한 Cloud Storage 로활용 Advantage 용량 / 성능확장성서비스무중단확장합리적인비용 Peta 급볼륨지원 사례 U+Box / 웹하드 175TB 웹브라우저를통한이미지기반영상검색및공유인터넷서비스 ( 이미디오, imideo) 의대규모컨텐츠저장 100TB 모바일디바이스을이용하는대규모이용자를대상으로한인터넷컨텐츠의접근및공유를지원하는소셜매거진서비스를위한기반스토리지로활용 11
Use Cases - 인터넷서비스부문 LGU+ 도입및활용현황 (1/2) 내용 비고 내용 비고 스토리지전체용량 70PB 이상 스토리지전체용량 2PB 이상 스토리지 SET 수 9 개 스토리지 SET 수 11 개 단일 SET 최대용량 약 10PB 단일 SET 최대용량 약 350TB 스토리지사용 1 일증가량 평균 30TB 대규모이용자파일업로드 기존 SAN, NAS 데이터이관 스토리지증설예정규모 약 1PB 사용자증가 기존 SAN 데이터이관 응용서버약 160 개 천만이용자의수용이가능한고성능 Scale-Out 스토리지 도입 / 유지비용절감이탁월한소프트웨어기반스토리지솔루션 이용자 10,000,000 명이상 1 SET 기준 Data 노드 100 개, 약 10PB U+Box 용스토리지 SET 형상 12
Use Cases - 인터넷서비스부문 LGU+ 도입및활용현황 (2/2) 스마트폰백업 / 복원 대용량공유 무료음악 / 영화 천만이용자의클라우드기반동영상 / 사진백업, 스마트폰백업 / 복원, 대용량공유, 다양한놀거리제공서비스 앱, 주소록, 메시지, 일정, 사진, 동영상, 메모등 내폰의모든것을안전하게백업 / 복원 동영상 1GB, 사진 300 장바로공유 매주업데이트되는최신음악및영화무료제공 On-Air 동영상 / 사진공유 On-Air 대용량공유 On-Air 무료컨텐츠 친구들과대화하면서동영상 / 사진을함께공유하는서비스 동영상 / 사진을친구와함께보면서대화 (On-Air) 동영상용량제한없이무제한공유 사진한번에최대 1,000 개공유 친구와함께볼수있는다양한무료콘텐츠제공 스포츠생중계, 무료영화등 HD 급실시간모니터링 침입감지알림 침입녹화영상 HD 급화질로실시간모니터링및침입녹화영상저장이가능한클라우드기반서비스 HD 급화질의실시간화상모니터링 CCTV 가자동으로움직임 ( 침임 ) 을감지하여스마트폰으로 PUSH 메시지전송 침입감지시전후영상자동녹화및클라우드업로드 클라우드기반즉시영상확인가능 13
Use Cases 방송콘텐츠서비스부문대용량영상파일에대한방송및스트리밍서비스와데이터아카이빙을동시처리 Advantage Single 볼륨지원 서비스무중단확장 용량 / 성능확장성 (Scale-out) 방송 / 스트리밍서비스및아카이빙동시처리 합리적인비용 사례 300TB 320TB 660TB 300TB DTL(Digital Tape Library) 분산파일스토리지 분산파일스토리지기반영상방송및스트리밍서비스 14 ( 그림제공 : KNN)
Use Cases 방송콘텐츠서비스부문 부산 경남대표방송사 KNN 도입및활용현황 초기구축완료 (300TB 규모 ) : 중앙스토리지와아카이브의중간영역을 (2 차스토리지 ) 포지셔닝 향후발전방향 아카이브를대체함으로써고가의중앙스토리지비중을축소할수있도록시스템효율화추진 향후방송사자체서비스뿐만아니라대외콘텐츠서비스영역으로확대할계획 특히이미수십 PB 의아카이브시스템을갖춘중앙방송사들보다는, 이제아카이브도입을시작하는지역방송사나기타중소방송사의경우고가의아카이브솔루션을직접대체가능 15
Use Cases - 아카이빙부문대용량파일을효율적이고안전하게저장 / 관리가능한분산파일스토리지 Advantage Single 볼륨지원 용량 / 성능확장성 (Scale-out) 합리적인비용 복제기반데이터보호 / 원격지복제지원 BigData 분석지원 사례 국방지형정보단 지울수없는데이터 ( 영상, 이미지, 문서등 ) 의큰파일들에대한 Analog 방식저장 거의모든데이터파일을디지털방식으로단일공간에저장 보관과정에많은시간과인력이필요 Analog 자료를색인화하고검색하는데별도의인력 / 시간필요 패러다임변화 보관과정에는인력이거의필요치않음 자료의검색및관리에 1~2 명의인력이면충분함 [ 검색요청 - 자료검색 - 자료추출 - 확인 ] 이러한흐름을반복하여결과를찾은후에야실제 Data 를다시 Digital 로복제하여활용가능 자료의검색은필요한사람이직접손쉽게할수있음 저장된데이터에대한빅데이터분석요구발생시스토리지레벨에서즉시적용가능 16
Use Cases - 프라이빗스토리지부문기업내필요한다양한응용서비스기반통합스토리지로활용 Advantage 다양한응용서비스와호환가능 Single 볼륨지원 용량확장성 (Scale-out) 복제기반데이터보호 합리적인도입 / 증설비용 사례 연계서비스컨텐츠중앙화웹하드 Mail 서비스 FTP 서비스 (ECM) 서비스 PC / Server 데이터백업 416TB E-Disk 서비스 Email 서비스 그룹웨어 단일스토리지로기업내모든서비스기반스토리지로활용하기때문에효율적으로데이터공간을활용할수있음 POSIX API 지원으로기존응용서비스변경없이수용가능 다수의서비스운용중에도서비스정지없이용량확장가능 17
thank you Address 경기도안양시동안구비산동 1110-2 KT 안양지사 5 층 Office / Fax 070-7730-4200 / 031-382-0104 E-mail u2n@u2n.kr Website www.u2n.kr 18
Appendix AionDisk Details
개요 Network Server Storage (Replicator, Utilities, Web-GUI, MDS Clustering..) 20
Architecture 메타데이터와데이터경로를구분하는비대칭 (Asymmetric) 클러스터구조 Volume / home share Metadata big.avi Data Data AionDisk Client (mount t gfs mds:/vol /mnt) Metadata Access Path 1G/10G Ethernet Switch AionDisk Metadata Server (gfs_mds start) 4TB, 60MBps 48TB, 2Gbps PC 용 HDD (7200rpm SATA HDD) X86 기반서버박스 (HDD 12bay 기준 ) AionDisk Data Server (gfs_ds start) 21
Linear Scalability in Capacity & Performance 데이터서버의증설로스토리지의저장용량및 I/O 성능이선형적으로증가 Clients 14Gbps 12Gbps 10Gbps 8Gbps 6Gbps 4Gbps 332TB 284TB 236TB 188TB 140TB 92TB Performance Capacity Storage Server 각데이터서버노드가 48TB (4TB X 12bay 기준시 ) 스토리지용량과 Dual Gigabit Ethernet 제공할경우를가정 Scale Free 22
Single-Volume Virtualization 네트워크로연결된리눅스기반이기종스토리지서버들을단일볼륨으로가상화 모든노드들을하나의파일시스템으로구성하여, 20PB 이상의단일볼륨을제공 용량의증가나서버구성변경이발생하더라도애플리케이션수정이불필요 Device Free Volume Free Single-Volume 23
High Availability Configuration 일반적인스토리지활용에최적화된기본구성은물론대규모파일핸들링을위한 MDS Clustering 구성지원 MGT Slave MGT Master AionDisk Management Server ` Clustered MDS AionDisk Clustered Metadata Server Default Configuration ` 1G/10G Ethernet MDS Clustering Configuration MDS Slave (Standby) ` MDS Master (Active) AionDisk Metadata Server (MDS) 1G/10G Switch 1G/10G Ethernet ` AionDisk Client Windows ` Linux AionDisk Data Server(DS) 24 * MDS Clustering (4EA) 구성시초당 10 만개의메타데이터 Look-up 연산지원
Self-Healing for Availability 각각의파일은 CHUNK 단위로분할하여다른데이터서버에분산저장분산저장된 CHUNK는복제본인 REPLICA를생성하여다른데이터서버에저장데이터보호를위한복제본관리의다양한정책지원저장위치 (Other Rack / Server / HDD), n중화 ( 볼륨 / 디렉토리 / 파일별 ) 데이터서버의장애시다른데이터서버의 CHUNK / REPLICA를이용해자동복구분산저장된데이터의원본과복제본은파일의 Read Access에동시에활용 F I L E F I L E I Data Server Data Server Data Server Data Server Data Server 25
24/7 Service Continuity 스토리지시스템의중단없이데이터서버확장과디스크추가등용량확장가능 데이터서버및디스크손상시데이터복구와자원교체에따른스토리지시스템중단없음 원격지의스토리지시스템으로전체데이터의미러링이가능하여특수상황에서도서비스중단없음 Fail Disk 1 2 1 3 2 3 2 3 Non-Disruptive Capacity Expansion Non-stop Storage Service Non-Disruptive Resource Replacement Remote Sync 26
Remote Sync for Disaster Recovery 원격지의스토리지시스템으로전체데이터미러링이가능하여재난등의특별상황에서도무중단서비스지원 Remote Active-Active / Active-Standby Configuration MDS MDS MDS MDS MDS Active MDS Standby WAN Sync DS DS DS DS DS DS File Sharing and Service Point Transition w/o Stopping Application Server Group 1 Application Server Group 2 27
Data Encryption for Security 효율적인암호화기법으로비암호화시의 I/O 성능과근소한차의 I/O 성능지원 (10% 미만 ) 데이터 (CHUNK) 자체를암호화하여최악의상황에서도데이터의보호가능 AES-NI 128bit / 256bit 암호화방식으로선택가능 Encryption Method Setting MDS MDS Active MDS MDS Standby AES128 or AES256 Encryption Key Setting DS DS DS Client Decryption (Read) Encryption (Write) Encrypted CHUNK 28
Data Replication for Availability 안정성과성능에각각최적화된데이터이중화도구제공데이터실시간이중화 (Sync REPLICA) 원본데이터 (CHUNK) 의복제과정상낮은확률의 HW 오류에대응하기위한동기화모드데이터지연이중화 (Lazy REPLICA) 원본데이터 (CHUNK) 의기록이후에시스템의부하를고려해복제시기를결정 데이터실시간이중화 데이터지연이중화 원본복제본복제본 29
De-duplication for Efficiency AionDisk 스토리지내동일콘텐츠에대한중복파일을제거볼륨 / 디렉토리별중복제거단위영역설정지원으로정책에따라효율적인중복제거가능비용절감효과 : 저장공간의확장비용최소화효율적인자원관리 : 단위스토리지당더많은데이터저장이가능 Cost & Management Benefit Dedup 30
Efficient Monitoring & Management 웹 / 커멘드기반통합스토리지모니터링및관리도구지원 개별 / 전체스토리지부하및상태정보에대한통합모니터링지원 클러스터스토리지구동 / 추가 / 삭제, 스토리지기능옵션설정전반에대한관리지원 31
Cost Effectiveness H/W 에종속적이지않는네트워크스토리지솔루션으로초기도입비용이매우탄력적임 기존 TCP/IP 네트워크및스토리지자원활용및범용기성품하드웨어사용가능 AionDisk 의개별 / 통합라이선스정책으로솔루션도입및유지보수비용이합리적임 SW Solution x86 Server Ethernet SATA HDD 32