1. 비정형 데이터 분석을 위한
IBM Watson Explore
Jun. 2018
이동연실장
IBM Analytics Team, IBM Korea
2. WatsonExplorerV12의제품종류
• IBM Watson Explorer Deep Analytics Edition Foundational
Components V12.0.0 (Windows, Linux)
• IBM Watson Explorer Deep Analytics Edition Analytics Components
V12.0.0 (Windows, Linux, AIX, Linux on System z)
• IBM Watson Explorer Deep Analytics Edition oneWEX V12.0.0 for
ICP Linux
• IBM Watson Explorer Deep Analytics Edition oneWEX V12.0.0
(Windows, Linux)
3. IBMWatsonExplorerDeepAnalyticsEditionV12
• 간편해진 패키징
• 새로운 oneWEX는 업데이트된 클래식 구성 요소를 포함하고 있습니다.
• oneWEX 플랫폼을 소개합니다.
• 목표 : 최첨단 기술의 FC/AC와 함께 제공되는 검색 및 컨텐츠 분석 솔루션
• 더 보강된 FC/AC 기능 구현
Deep Analytics Edition
V11 V12
Enterprise Edition
FC
Advanced Edition
ACFC FC oneWEXAC
4. 목차
• IBM Watson Explorer 를 사용하고 있는 고객들
• 다양한 산업군과 유형
• 비정형 데이터의 중요성
• IBM Watson Explorer 기능
• 비정형 데이터 분석에 특화된 솔루션
• 서비스 구성도 및 컨텐츠 마이너
• UMIA 아키텍처
• IBM Watson Explorer 12의 새로운 기능들
• 새로운 아키텍처
• 새로운 컨텐츠 마이너
• ML 기반의 문서 분류(Document Classification)와 유사 문서(Ranker) 검색 기능
• 확장성
• 요약
13. 관리자
사용자
분석가
관리
보고서
분석도구
REST
대시보드,
정형보고서 및 검색
Financial
Applications
Scorecards
Planning and
Reporting
Business Intelligence
& Analytics
ETL
기업 외부
FTP
기업내부
거버넌스 개발환경 보안
Thumbnail
Index
Facet Count
Sub Index
Taxonomy
Index
Search
Index
뉴스 빅데이터 분석서버
Crawler
Framework
Importer
Framework
Document Processor
Parser
Document
Generator
Annotator
UIMA
Annotator
ExporterCommon Infrastructure
Control Monitor Configuration
Logging Security Scheduler
Raw Data
Store
Document
Cache
Crawler
Plug-in
Crawlers
CSV
Importer
Indexer
Service
Indexer
Export Plug-in
Inspector
Text Analytics
& Search
Runtime
xx용
수집 DB
SNS
뉴스기사
원문
뉴스기사
카테고리
뉴스기사
메타데이터
Crawler
영역
UMIA 분석 엔진
자연어 분석 결과
저장 및 검색
분석 결과 보기 및
API
시스템 설정 / 관리 사용자 인터페이스
WEX서비스구성도
14. 원문보기
패싯트리
(분류맵)
시계열,
편차,
경향등
다양한
시각화
메뉴
연관된
품사 빈도
탐색어와
연관 관계
검색
WEX는직관적인컨텐츠마이너화면을제공합니다
1
2
3
1. WEX Default Facet
데이터 로딩만으로 분석할 수 있음
기본적인 Pattern Discovery 수행
- Part of Speech
- Phrase Constituent
- Sentiment Expression
2. Structured Data Facet
분석대상 문서와 연계된 메타 정보
비정형 데이터와 연계 insight 도출
- 작성자, 분류, 소분류, 회사명,
브랜드 평가점수,.. 등
3. Analysis Facet
인지 컴퓨팅 기반 분석 목적에 따라
텍스트에서 추출한 분석 관점
- 상품 관점
- 긍정/부정
1 2 3