2019 2017 2018 SPLUNK INC. Splunk 소개 빅데이터머신데이터플랫폼 Splunk Korea / 2019 May 2019 Version 1.0
목차 1. Splunk 란? 2. Splunk 의여섯가지주요기능 3. 고객사례
Splunk 회사소개 회사 제품 고객 글로벌 HQs: 샌프란시스코 (AMER) 런던 (EMEA) 홍콩 (APAC) 직수전세계 4,500+ 명 연매출약 1 조 2 천억원 ($950YoY +42%) 나스닥상장 : SPLK 무료버전에서시작, 대규모분산확장 스플렁크제품 : Splunk Enterprise Splunk Cloud Premium Solutions - Enterprise Security - IT Service Intelligence - UBA Phantom, VictorOps 고객사 ( 전체 ): 16,000+ 고객사 ( 한국 ): 400+ 국가기준 : 110 개국 + 중소기업, 대기업그룹계열사 포춘 100 대기업 : 89+ 최대라이센스 : 10+ PB/ 일
머신 데이터란? 어플리케이션 데이터 모바일 앱 & 웹사이트 데이터 일일 평균 3시간 모바일 앱 사용* IT 인프라 데이터 네트워크 서버 & 클라우드 서비스 데이터 센터의 다운타임으로 인한 손실은 평균 시간당 $300,000* 보안 데이터 방화벽 데이터 & 엔드포인트 보안 솔루션 데이터 2021년에 이르면 사이버 범죄로 인한 손실 비용이 연간 $6 조에 이를 것으로 예상* 고객 생성 데이터 소셜 미디어 데이터 & 콜 로그 전세계적으로 28 억 건의 소셜 미디어 데이터 존재* IoT 데이터 온도 제어 & 속도 측정 장치 2017년 기준으로 장치(Thing)에서 발생하는 84 억 건의 데이터가 존재*
2017 SPLUNK INC. 머신데이터를 사업적 가치로 전환 원시 데이터 그대로 수집 : 위치, 형태, 규모에 상관 없이! 어떠한 질문도 OK! 어플리케이션 개발 Containers Online Services Web Services On-Premises Servers IT 운영 GPS Location Security Packaged Applications Networks Storage Custom Applications Desktops RFID Private Cloud Messaging Firewall Energy Meters Telecoms Online Shopping Cart Public Cloud Call Detail Records Web Clickstreams Smartphones and Devices 보안, 규정 준수, 사기 방지 Databases 비지니스 분석 Intrusion Prevention 산업 데이터 및 사물 인터넷(IoT)
머신데이터분석환경의새로운패러다임 SCHEMA AT WRITE 30 YEARS Ecosystem ~$100Bn SCHEMA AT READ NEXT 15 YEARS+ Next Gen Analytics Ecosystem ERP, CRM, SFA, etc SQL 어플리케이션 쿼리언어 IT운영, 보안관제사용자 / 서비스?? 분석 Search?? RDBMS 데이터저장소??
Database 중심의분석프로젝트 Pain-points Human Generated Data SNS data like Twitter > Machine Generated Data CDR > Packets > Sensor data > Security data > Log files > Server Status > Virtualization Mgmt > Application Monitoring > Web Logs > Transaction Data > Scripts > Metrics > Configuration Data > ERP IT 3 rd Party MES Database Custom Adapters!!! Big summarization? Data? E.T.L DB Schema Database DW / DM 어댑터를만들고유지하기어렵다 E.T.L 과스키마디자인 end-to-end 실시간요구사항? 대용량데이터베이스유지 / 관리 NOT AGILE! BI solutions
하둡프로젝트의 pain-points Human Generated Data SNS data like Twitter > Machine Generated Data CDR > Packets > Sensor data > Security data > Log files > Server Status > Virtualization Mgmt > Application Monitoring > Web Logs > Transaction Data > Scripts > Metrics > Configuration Data > ERP IT 3 rd Party MES Database Oozie Flume Custom Adapters Mahout HBase HDFS E.T.L DB Snappy Zookeeper Hive, Pig Hadoop Schema Whirr Map Reduce Sqoop Database DW / DM 조금만바뀌어도새로운모듈개발프로젝트 관리할컴포넌트가너무많다. 전문가를구하기어렵다. 실시간요구사항수용이어렵다. 장애대처가어렵다. NOT AGILE! BI solutions!!! Big Data?
SPLUNK 는다릅니다 Machine Generated Data CDR > Packets > Sensor data > Security data > Log files > Server Status > Virtualization Mgmt > Application Monitoring > Web Logs > Transaction Data > Scripts > Metrics > Configuration Data > New Data Source > New Data Source > New Data Source > Forwarder Adaptor? E.T.L? DB Schema? DB Mgmt? Limit? Ad-hoc Search Chart Dashboard Alert!!! Database Hadoop Others
2017 SPLUNK INC. = 머신데이터플랫폼 머신데이터를아무런제약없이수집 > 저장 > 분석 > 시각화할수있는실시간분산플랫폼 머신데이터 (Machine Data) 제약없음 (No Limits) 엔드투엔드 (End-to-End) 실시간및분산 (Real-time) 플랫폼 (Platform) 서버 /NW 로그 각종설비데이터 애플리케이션로그 기타모든텍스트형태의데이터 비정형 / 정형데이터 데이터포맷무관 데이터용량무관 데이터속도무관 제약없이수용 별도의외부솔루션불필요 복잡한코딩및 SI 개발이필요없음 데이터의생성부터가치획득까지모두 모든데이터실시간처리, 즉시결과확인 분산저장, 분산검색 성능및용량의선형적확장 커스터마이징용이 외부시스템과손쉬운연동 1500 여무료앱을통한기능확장 개발프레임워크
목차 1. Splunk 란? 2. Splunk 의여섯가지주요기능 3. 고객사례
1. 다양한이기종데이터소스로부터제약없는수집에이전트 / 에이전트리스방식제공으로유연성과최적화된수집기능제공 syslog TCP/UDP Local File Monitoring Splunk Forwarder syslog hosts and network 1 devices *nix Windows Mainframes Mounted File Systems \\hostname\mount Scripted or Modular Inputs shell scripts, API subscriptions Event Logs Performance Active Directory Wire Data Splunk App for Stream DevOps, IoT, Containers HTTP Event Collector API Unix, Linux and Windows hosts shell perf virtual host
2. 하루수백 TB 수집까지횡적확장엔터프라이즈급확장성, 장애복구, 및통합성제공 Search head 로검색워크로드오프로딩 Splunk Indexer 들로자동부하분산하여균등하게데이터압축저장 Splunk Forwarder 를통해수천대서버에서데이터를전송
3. 강력한검색기능머신데이터검색에최적화된 Splunk 자체검색언어인 SPL 을활용한검색 SQL 기능과 Unix 파이프라인구문이결합된최적의 자동필드추출 검색어 시계열데이터분포 검색데이터 검색언어인 SPL 지원 검색, 상호연관, 분석및시각화관련된 140개이상의명령어제공 통계, 그래프, 각종연산함수를활용한분석 별도의 correlation key 설정없이상관관계분석가능 신속하게필요한데이터를찾아분석하여사고의근본원인을파악
4. 내장 UI 컴포넌트를활용한쉽고빠른대시보드제작
5. 실시간감시및알람 경고트리거옵션 PDF 예약전송 실시간모니터링및알람등록 검색쿼리저장후실시간 / 주기적인실행을통한모니터링 자동대응을위한각종프로그램 / 스크립트실행가능 RSS, Email 통지및 NMS/SNS 연동가능 PDF 스케줄전송기능을통한보고서이메일발송
6. 다양한 App 생태계 및 커뮤니티 앱 생태계를 활용하여 최소의 리소스로 빠르게 요구사항을 구현 1500+이상의 다양한 앱 생태계 Weather' BigFix' Sendmail' PDF'Report'Server' F5'' Radio'StaAons' WebSphere' XenDesktop' NetScaler' splunkbase.splunk.com MulAcast' conf.splunk.com MS'Exchange' FISMA Ruby'on'Rails' TwiWer' Google'Maps' Windows' Whois'lookup' PCI'Compliance' Puppet'Conf.'Mgt' Python'Mail' NetFlow' Audible'Alerts' Nagios' Unix'and'Linux' Sourcefire' Splunk'Monitoring' SNORT' FireEye'Malware' Stock'Quote' POST/GET'Rqsts' FISMA'Monitoring' Citrix'NetScaler' answers.splunk.com Security' Javamail' Security' SCOM' BlueCoat'ProxySG' Solera'DeepSee' TCP/UDP'Sending'IronPort IronPort'WSA' WSA IMAP' RSS'Input' YouTube' JMS'receiver' Encrypt/Decrypt' Enterprise'Security' AS/400'3'iSeries' TransacAon'Profiling' Geo'LocaAon' VMware' Fin.'Inf.'eXchange' Splunk'Mobile' wiki.splunk.com
목차 1. Splunk 란? 2. Splunk 의여섯가지주요기능 3. 고객사례
국내 Splunk 고객사 400 여국내고객사들이 IT 운영, 보안, OT 등다양한분야에서활용 고객명내역고객명내역고객명내역고객명내역 삼성전자모바일 Samsung Account 갤럭시펌웨어관제모니터링 삼성전자반도체 실시간반도체제조공정모니터링 / 분석시스템 IT 운영관제, 보안 ( 내부자통제 ) 신한은행 이상징후탐지시스템모바일거래분석시스템 신한금융지주 / 신한생명 / 신한금투 이상징후탐지시스템 ( 개인정보유출방지 ) 시스템 삼성전자 VD 빌드로그분석, devops LG 전자 SmartData 팀마케팅분석전사보안관제 하나은행 FDS 시스템, 통합보안관제시스템 - 금감원선정가장 FDS 구축이잘된기관선정 동양증권 삼성전자 R&D Devops, CI/CD 모니터링현대기아차전사 SIEM 외환은행 FDS 시스템현대카드 삼성화재 삼성전기 애니카다이렉트사용자패턴분석시스템 제조센서데이터수율분석 SKT KT 통신망통합품질관리시스템 IT 보안관제네트워크보안관제 ucloud 운영관제네트워크보안관제내부자통제 통합보안관제시스템, FDS, 업무분석시스템 통합보안관제시스템, 콜센터분석시스템 제일은행로그통합, SIEM,FDS 프로젝트한화증권통합보안관제시스템, FDS 대신증권 FDS, 업무관제, 내부정보유출방지시스템 KB 증권 서비스통합관제시스템 삼성카드보안로그분석시스템 LGU+ 전자결제시스템관제모니터링현대해상로그기반보안관제시스템증권예탁결제원 Safe Plus 데이터분석시스템 삼성증권이상징후탐지시스템 (FDS) KTnet 전자무역시스템통합 OP 센터 NH 농협은행차세대보안관제시스템 (SIEM) 우리은행, IBK FDS 시스템 호텔신라내부자통제 SK 브로드밴드 ISP 보안관제, IPTV 품질분석모니터링 금융결제원 IT 운영관제시스템금융보안원차세대보안관제시스템 (SIEM) 롯데보안관제 Nexon 게임사기행위탐지롯데홈쇼핑 CallCenter 통합고객분석우리은행차세대보안관제시스템 (SIEM) NS 홈쇼핑콜센터분석 NCsoft 보안관제 CJMall 서비스모니터링, 실시간마케팅분석 KB 증권 서비스통합관제시스템
감사합니다 2019 2017 SPLUNK INC.