빅데이터 이해기반 자가학습형 지식베이스 및 추론 기술 개발

Size: px

Start display at page:

Download "빅데이터 이해기반 자가학습형 지식베이스 및 추론 기술 개발"

서환 탄
6 years ago
Views:

1 인공지능, 이미시작된미래 솔트룩스기업및 AI 사업소개 2017

2 01 솔트룩스소개

3 1. 솔트룩스소개 솔트룩스는인공지능기술기반의시맨틱검색과빅데이터분석전문기업입니다. [ 억원 ] 구분 자산 자본 매출

4 1. 솔트룩스소개 솔트룩스는 700 여고객이검증한독보적원천기술과솔루션제품, 탁월한성능의 AI/ 빅데이터플랫폼기반의글로벌경쟁력을보유한기업입니다. 1 빅데이터 / 인공지능원천기술보유 아시아최고수준의인공지능원천기술 세계최고성능의실시간빅데이터분석기술 국내독보적인핵심기술특허다수보유 2 탁월한성능, 검증된데이터와플랫폼 초대규모데이터 / 지식자원보유 (80 억건 ) 국내유일의 AI/ 빅데이터통합제품라인업 아시아최대규모인공두뇌 ADAM 3 글로벌사업경험과미래시장선도 국제 R&D 와지사통한글로벌사업경험 비정형, 실시간분석부문선도적시장지위 AI 플랫폼, DaaS 와 Smart Factory 신사업 4

5 1. 솔트룩스소개 인공지능기반의빅데이터심층분석과지능형플랫폼서비스사업을수행하고있습니다 세상모든사람들의자유로운지식소통세상 기술 / 사업컨설팅소프트웨어솔루션혁신적서비스 지능형검색솔루션 텍스트마이닝 고객목소리분석 시맨틱검색 비정형마이닝 빅데이터 심층분석 실시간운영인텔리전스 소셜빅데이터융합분석 기업 / 공공빅데이터분석 인공지능 서비스플랫폼 인공지능플랫폼 ADAM DataMixi DaaS 서비스 개인화서비스 (ziny.news) 5

6 1. 솔트룩스소개 지난 20 년간자연어처리로부터대규모기계학습과추론까지인공지능한길을걸어왔습니다 소프트웨어솔루션 상황인지 지식베이스학습 / 추론 시각화 텍스트마이닝 기계학습 ( 딥러닝 ) 실시간인메모리분석 병렬분산 ( 하둡, 스팍 ) 클라우드서비스 자연언어처리 시맨틱검색 지식자원수집 6

7 1. 솔트룩스소개 국내최대인공지능 / 빅데이터관련지적재산권을보유한연구개발중심의강소기업입니다 7

8 1. 솔트룩스소개 700 여국내외고객이솔트룩스의제품과기술을도입하여그혁신성을경험하고계십니다. P A T 8

9 1. 솔트룩스소개 BigO ( 빅오 ) 빅데이터플랫폼 빅오 는빅데이터수집과시맨틱검색, 비정형심층분석이가능한실시간플랫폼입니다 국내최초시맨틱검색및텍스트마이닝기술상용화 ( 대통령상 ) 실시간정형 / 비정형심층분석과예측, 강력한시각화기능제공 제조, 국방, 공공등분산병렬초대규모분석플랫폼구축사례보유 BigO 빅데이터검색 / 분석솔루션라인업 BigO 와하둡생태계연계 / 통합 9

10 1. 솔트룩스소개 ADAM ( 아담 ) 인공지능플랫폼 아담 은아시아최대규모의학습, 분석, 추론, 질의응답이가능한인공지능플랫폼입니다 아담의플랫폼아키텍처 아담의지식학습 / 추론및 QA 시스템 10

11 02 구축사례소개

12 2. 구축사례소개지능형상담시스템사례 일본 DNP(IWI) 는솔트룩스와함께일본최초로미즈호은행의가상상담사 미나 구축 / 제공 12

13 2. 구축사례소개지능형상담시스템사례 손보재팬, ANA 등글로벌기업들이가상상담사구축을위해솔트룩스의시맨틱기술활용 13

14 2. 구축사례소개대규모공통빅데이터분석플랫폼 공공, 국방, 교통등국내최대공통빅데이터분석플랫폼구축사례보유 14

15 2. 구축사례소개미래부빅데이터분석 / 활용공통플랫폼 솔트룩스빅데이터솔루션에기반한미래부빅데이터분석활용센터플랫폼구현 Big Data Crawler TCP/IP File I/O JAVA objects Document filters ORM (Object Relation Mapping) String/Binary Rule Engine HTTP RESTful HTML/XML/ JSON Parser OXM (Object XML Mapping) Collection Manager Data Mapper Config. Files Data Collection Log Statistic Log Log Data 15

16 2. 구축사례소개국방부문빅데이터분석공통플랫폼 국방부문에서공통사용가능한국가안보빅데이터분석공통플랫폼제공 16

17 2. 구축사례소개실시간 IoT/ 센서데이터분석및스마트공장구현 실시간스트림빅데이터분석기반의 IoT 및스마트공장구축사례 17

18 2. 구축사례소개실시간센서데이터분석및개인맞춤추천 센서네트워크기반의실시간빅데이터모니터링 / 예측과미디어빅데이터분석과추천 Sensor Monitoring Recom. Detour Path Discover Leakage Area 18

19 2. 구축사례소개언론및소셜빅데이터분석플랫폼 대규모뉴스및소셜데이터로부터의감성분석을포함한대규모비정형분석사례 정보제공 언론사 통계 서비스데이터분석 텍스트마이닝자연어분석정형화색인검색 정보이용 언론사 ( 기자 ) 공공기관일반인 19

20 2. 구축사례소개시맨틱검색과비정형기업빅데이터분석 문서중앙화와 EP 연계한시맨틱검색과비정형기업빅데이터분석시스템제공 20

21 2. 구축사례소개지능형고객목소리 (VOC) 분석 한화생명을포함한한화그룹, KT, 도로공사, 건보등국내최대지능형고객목소리분석사례 21

22 2. 구축사례소개기술및시장동향분석, 예측시스템 삼성전자, LG 전자등신기술자동분석과시장동향분석과예측사례 22

23 2. 구축사례소개국방, 보안등실시간이상징후감지 국가안보와보안부문에서비정형분석, 이상징후감지, 지능형예측기술제공 TICN 정보융합 S/W 개발 적용기술 주요기능 정보융합분석기술 소셜네트워크분석기술 텍스트마이닝기술 빅데이터기술일부적용 첩보문서수집및분석 이슈추출및분석 인물네트워크분석 상황정보의시각화 상황정보관계추론 23

24 03 AI 플랫폼소개

25 3. ADAM 소개 아키텍처 - 대규모데이터와기계학습, 추론과질의응답이가능한병렬분산플랫폼 Smart Speaker Social Robot Smart Toy CONNECTED SERVICES AdamVR Customer Center Smart Tutor Connected Car Commerce ChatBot PLATFORM MANAGE Security Manager APIs PUBLISHING ENGINE User/Key Manager RESTful Publish Access Logging Deep QA Dialog Manager INTELLIGENCE ENGINE Machine Translation Voice (STT/TTS) Image Cognition Recommendation Service Manager Performance Manager Data Manager ANALYTICS ENGINE Cognitive Analysis Visual Analysis Dashboard Brochette Building Knowledge Learning KNOWLEDGE ENGINE Knowledge Embedding Hybrid Reasoning Human Curation Tools Data Manager DATAHUB ENGINE BIGO PLATFORM Resource Manager Custom CKAN Real Time Crawler On- Demand Crawler Discovery Search& Mining BlueBolt Stream Data Analysis Storm Knowledge Storage Tornado Big Data Collect Rainbow Big Data Visualize LEA Language Analysis Cloud Manager 25

26 3. ADAM 소개 DATA HUB 보유데이터소개 인공지능서비스구현, 기계학습 ( 딥러닝 ) 을위한국내최대규모의데이터보유 오픈데이터 33 만셋경제, 환경, 행정등 소셜데이터 88 억건 SNS, 뉴스, 블로그등 (5 년치 ) 링크드데이터 1 만셋 (1 백억트리플이상 ) RDF, OWL 파일 온디멘드데이터 3 천만건카페, 쇼핑몰, 웨이보등 실시간데이터 5 종날씨, 환율, 주가등 26

27 3. ADAM 소개 ANALYTICS - 인지분석 (Cognitive Analysis) 과시각적분석을위한서비스지향아키텍처 Market Analysis Competitive Analysis Risk Management ANALYTICS SERVICES Voice of Customer Brand Monitoring Marketing Optimization National Defense Voice of Citizen BIGO BLUEBOLT In-Memory Analytics Line/Bar Charts Pie/Radar Charts VISUAL ANALYSIS (WIDGET) Network Charts Motion Charts Cluster Chart Regression /Statistics DASHBOARD SERVICE Dashboard Builder Widget interlinking Real-time Publisher Stream Data Aggregation Data Uploader DATA MANAGEMENT Data Downloader Storage Manager Trend Analysis Topic Analysis COGNITIVE ANALYSIS Topic Trend Sentiment Analysis Sentiment Trend Statistical Analysis ADAM INTELLIGENCE Language APIs DATAHUB OPEN DATA BIGO SOCIAL DATA USER DATA Analysis APIs Open Data Real-time Data On Demand Data News Blog, Community On Demand Data Uploaded Data Joined Data Data APIs 27

28 3. ADAM 소개 ANALYTICS - 화면샘플 다양한통계적분석뿐아니라감성및이슈감지, 사건예측과강력한시각화제공 28

29 3. ADAM 소개 INTELLIGENCE 소개 (1/3) 인간처럼학습, 추론가능한지식엔진 ( 지식베이스 x 지식학습 x 추론 ) 29

30 3. ADAM 소개 INTELLIGENCE 소개 (2/3) 기계학습 ( 딥러닝 ) 기반의지식학습과인간언어이해, 질의응답등지능서비스구현을위한 APIs 코어지식베이스구축엔진자동지식학습엔진질의응답및지능서비스 APIs 30

3. ADAM 소개 INTELLIGENCE 소개 (3/3) 데이터분석언어지식지능 온디맨드데이터수집 데이터 검 색 트랜드 분 석 키워드 추 출 형태소 분 석 구 분 문 석 개 검 념 색 관 검 계 색 인스턴스 검 색 심 층 질의응답 대 화 매니저 데이터 다운로드 데이터 업로드 연관주제 분 석 인용구 분 석 개체명 인 식 이벤트 인 식 트리플 검 색 위키백과

31 3. ADAM 소개 INTELLIGENCE 소개 (3/3) 데이터분석언어지식지능 온디맨드데이터수집 데이터 검 색 트랜드 분 석 키워드 추 출 형태소 분 석 구 분 문 석 개 검 념 색 관 검 계 색 인스턴스 검 색 심 층 질의응답 대 화 매니저 데이터 다운로드 데이터 업로드 연관주제 분 석 인용구 분 석 개체명 인 식 이벤트 인 식 트리플 검 색 위키백과 지식학습 텍스트 지식학습 사용자 의도이해 자 번 동 역 데이터학습추천 데이터알림 이 감 슈 지 토 픽 트랜드 시맨틱 분 석 워 드 임베딩 지 식 임베딩 의미망 경로조회 지 변 식 환 음 인 성 식 음 합 성 성 문 필 서 터 HTML 랩 퍼 감 분 성 석 네트워크 분 석 신조어 추 출 언 식 어 별 브로솃 검 색 SPARQL 질 의 NLQ to SPARQL 이미지 인 식 선호학습 추 천 뉴 검 스 색 뉴 피 스 드 자 분 동 류 자 군 동 집 오탈자 교 정 다국어 언어자원 OWL-DL 추 론 규 추 칙 론 공 추 간 론 뉴 알 스 림 기 타 통계분석 분석결과 검 색 언 추 어 론 31

32 3. ADAM 소개 질의응답과상담서비스를위한대화시스템 QA 및상담을위한도메인지식학습과대화모델링, 사용자의도분석기능을내장 외부서비스 언어서비스... 모델, 데이터 32

3. ADAM 소개 ADAM AI 시스템차별성과독창성 P H S 다형지식 (Polymorphic Knowledge) 자기진화 (Self-Evolving) 복합추론 (Hybrid Reasoning) 차별성세부특성비교사례 WiseKB 독창성 다형지식 인간지식표현의다양성대규모지식베이스고품질화 CyCorp Cyc( 미 ) IBM Watson( 미 ) Google

33 3. ADAM 소개 ADAM AI 시스템차별성과독창성 P H S 다형지식 (Polymorphic Knowledge) 자기진화 (Self-Evolving) 복합추론 (Hybrid Reasoning) 차별성세부특성비교사례 WiseKB 독창성 다형지식 인간지식표현의다양성대규모지식베이스고품질화 CyCorp Cyc( 미 ) IBM Watson( 미 ) Google Graph( 미 ) Wolfram Alpha( 영 ) 논리, 인간언어, 통계지식의통합 Dual Spiral: 인간과기계의협력 자기진화 지식획득자동화지식자동검증과교정 IBM Watson( 미 ) Google Graph( 미 ) CMU NELL( 미 ) Google Graph( 미 ) Hybrid Learning ( 학습 + 규칙 ) 빅데이터학습기반신뢰도예측 복합추론 이질적추론의통합수행추론, 분석기술의경제성 EU LarKC(EU) CyCorp Cyc( 미 ) VU WebPie(EU) Franz AllegroG( 미 ) 시맨틱, 시공간, 확률통합추론인메모리분산추론, GPGPU활용 33

3. ADAM 소개 지식학습과복합추론의개념 이사람은중등교사인어머니와재혼한군인아버지사이에서차녀로태어났다.

아버지 ) = 군인 직업 (X. 어머니 ) = 중등교사 재혼 (X. 아버지, X. 어머니 ) 사망일 (X.

??? 박근혜 (90%) 고아라 (10%) 전재호 (5%) 단순탐색 ( 그래프매칭 ) 복합추론 시맨틱추론 공간추론 규칙추론 불확실확률추론

34 3. ADAM 소개 지식학습과복합추론의개념 이사람은중등교사인어머니와재혼한군인아버지사이에서차녀로태어났다. 경상도가고향으로광복절에어머니를잃었으며올해환갑이된이사람은누구인가? NLP 파편화된지식의학습과증강 정답타입 (X) = 사람 직업 (X. 아버지 ) = 군인 직업 (X. 어머니 ) = 중등교사 재혼 (X. 아버지, X. 어머니 ) 사망일 (X. 어머니 ) = 광복절 나이 (X) = 환갑 고향 (X) = 경상도 형제순 (X) = 차녀???? 박근혜 (90%) 고아라 (10%) 전재호 (5%) 단순탐색 ( 그래프매칭 ) 복합추론 시맨틱추론 공간추론 규칙추론 불확실확률추론 대한민국 최고수반 대통령 직업 박재옥 딸 직업 군인 직업 박정희 아버지 출생지 코어지식 대구 김호남 이혼 아내 남편 승려 박근혜 직업 교사 육영수 어머니 출생일 소속 옥천여중 육영재단 이사장 사망일 중학교 새누리당 34

도메인전문가검증자가지식학습 Learning by reading Learning by

35 3. ADAM 소개 고품질질의응답을위한지식베이스구축방법론 대용량고품질지식베이스구축을위한이중나선 (Dual-Spiral) 방법론 지식크라우드소싱 게미피케이션적용 일반지식의확장과검증지식큐레이션 고품질코어지식구축과개선 기존지식자원의선별과통합 지식베이스평가와피드백 전문지식의검증 WiseQA 질의응답검증 도메인전문가검증자가지식학습 Learning by reading Learning by taking advice 복합추론 복합상황추론 대규모불완전추론 추론실패문제해결 지식자원수집, 통합자동화 빅데이터및지식자원의자동수집 의미기반지식자원통합기술구현 35

36 별첨. 챗봇연계활용안 인공지능상담시스템은크게데이터영역, AI Platform 영역그리고서비스영역으로구분할수있습니다. 특히 AI Platform 은솔트룩스의방대한지식베이스인아담과연동하여일반시사상식을서비스할수있고, 챗봇및메신저등과연계하여상담서비스를구현할수있습니다. Data Tier Business Tier Presentation Tier 데이터영역 (Data Source) AI Platform 상담서비스 Interface Interface 고객업무데이터및정보 SPAQL 챗봇, 메신저등과연계하여상담서비스구현 지식베이스 ADAM( 시사상식 ) 36

37 별첨. 상담시스템구축안 신입직원 10 년차직원, 업무역량발휘지원가능한통합인공지능시스템구축필요숙련된콜센터상담원같은상담정보제공가능한인공지능상담보조시스템구축필요 업무기준, 약관, 상품설명서, 업무양식 상품 / 업무개요, 서류양식, Work Flow, 규정및업무매뉴얼, 각종 FAQ 와웹페이지 콜센터, KMS, STT 데이터사내게시판, 공문, 법률검토자료, 연수자료 37

38 We Communicate Knowledge for the People 솔트룩스는사람과사람, 사람과기계, 기계와기계가지식소통하는세상을꿈꿉니다.

Data Industry White Paper

2017 2017 Data Industry White Paper 2017 1 3 1 2 3 Interview 1 ICT 1 Recommendation System * 98 2017 Artificial 3 Neural NetworkArtificial IntelligenceAI 2 AlphaGo 1 33 Search Algorithm Deep Learning IBM