Agenda 코타나인텔리전스소개 Gallery, Solution Template 데모1. ML Tutorial : Classification 데모2. HDI 생성방법, Spark notebook demo, Power BI 시각화 데모3. 인지서비스 Live demo, Intelligent Kiosk 데모4. 챗봇 Skype Preview + LUIS
Digital Transformation
Microsoft 제품 / 서비스속 Machine Learning Clutter in Office 365 스팸분류, Infer.Net 확률모델 Power BI 자연언어로데이터시각화 Cortana 음성인식 / 합성, 의미추출 Kinect 적외선이미지로동작인식 윈도폰키보드오타수정이력을이용해향후누를키를강조 윈도태블릿터치인식 원노트필기인식 윈도부팅시간단축자주쓰는앱미리읽기 Band 저가센서로측정정확도향상 XBox 게임 AI, 랭킹시스템 Bing / SharePoint 검색기능 OneDrive 사진자동태그 Skype Translator 실시간양방향통역 Project Adam 이미지인식 : 개품종인식, 식물독성여부판단 + alpha
Xbox Live Exchange STB Commerce Risk Messenger LCA Windows Phone Microsoft Stores Windows CRM/Dynamics SMSG STB Malware Protection Ads Live Office365 Skype Bing Yammer # internal developers: 1000s # daily jobs: 100s of Ks daily I/O: >100 PBs data managed: EBs cluster sizes: 10s of Ks # machines: 100s of Ks
Transform data into intelligent action Data Sources 정보관리 빅데이터스토어 머신러닝및 고급분석 Data Factory Data Lake Store Machine Learning 인텔리전스 Cognitive Services People Apps Data Catalog SQL Data Warehouse Data Lake Analytics Bot Framework Web Event Hubs HDInsight (Hadoop and Spark) Cortana Apps Mobile Bots Data Sensors and devices Stream Analytics 대시보드및시각화 Power BI Automated Systems Data Intelligence Action
PolyBase FUTURE PROOF ARCHITECTURE PolyBase SQL Data Warehouse Data sources Data Lake Store Data Lake Analytics Storage HDInsight (Apache Spark) Cognitive Services Azure API Management Event Hubs Machine Learning Apps Backend Services Stream Analytics Power BI Bot Framework Azure Data Factory & Azure Data Catalog SQL Server Integration Services Sensors and devices StreamInsights Analytics Platform System R Services Microsoft R Server Reporting Services, Analysis Services, Mobile Report Microsoft Office Cortana
Demo Cortana Intelligence Gallery, Solution Template
Easily build, deploy, and share predictive analytics solutions 머신러닝및고급분석 Machine Learning Data Lake Analytics HDInsight (Hadoop and Spark) Stream Analytics 단순하고, 확장가능하며, 독특한플랫폼. 완전히관리되는클라우드서비스로서쉽게예측분석솔루션을개발 / 배포 / 공유할수있음. 수분만에배포. Azure Machine Learning 은비즈니스문제를위한도구임. 예측모델을웹서비스로배포하여어떤디바이스에서도예측모델을호출, 활용할수있음. 배포된예측모델은 Gallery 나 Azure Marketplace 에서과금을통한수익모델로활용할수있음.
고급분석사이클 Preparation Prepare Modeling Model Ingest Transform Cleanse Denormalize Profile Explore Visualize Feature & Algorithm Selection Model Testing & Validation Models Visualizations Deploy Apps, Services & Visualizations Operationalize Act: Score, Visualize Measure 13
1. 데이터입력 2. 실험수행 ( 분석모델만들기 ) 1) 데이터셋업로드 2) 클라우드데이터원본에직접 연결 3. 웹서비스로배포 4. Azure ML 활용 1) 모델의 API를활용한비즈니스앱개발 2) 결과데이터를활용한시각화 클라우드 PaaS 형 DB (Azure SQL DB) Hive 쿼리 (HDInsight) 클라우드 BLOB/ 테이블저장소 (Azure Blob /Table Storage) 그밖의지원하는 Data set Plain text (.txt) Comma-separated values (CSV) Tab-separated values (TSV) OData values SVMLight data (.svmlight) Attribute Relation File Format (.arff) Zip file (.zip) R object or workspace file (.RData) 실험에사용할데이터전송 Machine Learning 클라우드 PaaS 형 DB (Azure SQL DB) Hive 쿼리 (HDInsight) 잘만들어진분석모델의 API 화 ( 타비즈니스앱에서사용하기위해 ) 실험결과데이터셋저장 클라우드 BLOB/ 테이블저장소 (Azure Blob /Table Storage) 웹서비스로배포 C#, Python 등다양한언어로 API 호출가능 실험결과데이터셋또는 API 호출결과데이터셋을시각화 Azure BLOB Storage 에 API 호출결과 ( 배치 ) 데이터집합저장 1) 비즈니스어플리케이션에서활용 2) 시각화 서비스 API 키를사용하여어플리케이션에서 API 를호출하여 JSON 형태의결과값직접사용 Cloud BI (Power BI) On-premise 대시보드 (SQL Server 2016 Reporting Services) On-premise Excel BI [2) 클라우드직접연결방식 : 쿼리입력가능 ] [ 실험수행화면 ] [ 웹서비스관리화면 ]
Demo Machine Learning Tutorial
Comprehensive set of managed Apache big data projects 머신러닝및고급분석 Machine Learning Batch Script SQL NoSQL Streaming In-Memory Data Lake Analytics Map Reduce Pig Hive HBase Storm Spark HDInsight (Hadoop and Spark) Core Engine Stream Analytics 필요한시점에 petabytes 수준으로확장 비정형 / 반정형데이터처리 Java,.NET 등다양한언어로개발 하드웨어구매 / 유지불필요 Windows 또는 Linux로구현 수분만에 Apache Hadoop cluster 구성 Excel에서 Hadoop 데이터시각화 온프레미스의 Hadoop 클러스터와손쉽게연계
Demo Creating Hadoop cluster, Spark Notebook, Power BI
Build applications that understand people 인텔리전스 Cognitive Services Bot Framework Cortana 얼굴, 이미지, 감정인식, 비디오인텔리전스 언어처리, 음성인식, 커스텀음성인지 자연어처리, 감성 / 토픽분석, 스펠링오류등 복잡태스크처리, 지식탐색, 인텔리전트추천등 Bing 엔진기능 ( 웹, 자동완성, 이미지 / 비디오 / 뉴스검색등 )
Demo Cognitive Services Live demo, Intelligent kiosk
Your bots wherever your users converse 인텔리전스 Cognitive Services Bot Framework Cortana Bot 연결서비스 : 직접개발한 Bot 을등록하고, 채널을구성하고, Bot Directory 에배포지원. Bot 을문자, Office 365 메일, Skype, Slack, Twitter 등에연결지원. Bot 개발 SDK: Github 에공개된오픈소스 SDK 지원. Node.js 또는 C# 기반 Bot 개발에필요한모든도구제공 Bot Directory: Bot 연결서비스를통해 Bot 을등록할수있는공개디렉토리.
Demo Skype Bots, LUIS