Mais conteúdo relacionado
Semelhante a Hortonworksが提供する データ活用方法の紹介 (11)
Mais de Kimihiko Kitase (20)
Hortonworksが提供する データ活用方法の紹介
- 2. 2 © Hortonworks Inc. 2011 – 2016. All Rights Reserved
北瀬 公彦
KIMIHIKO KITAsE
http://blogs.itmedia.co.jp/kkitase
@kkitase
2016年6⽉、ホートンワークスジャパンに⼊社。
ビッグデータの収集、蓄積、分析基盤製品のマーケティ
ングを担当。⼊社前、⽶Data Science Dojoが開催する
データサイエンティスト養成講座に参加するも、全く畑
の違う分野で悪戦苦闘。開き直って、初⼼者に優しい
データの利活⽤術をお伝えしようと考えている。
facebook.com/kkitase
- 4. 4 © Hortonworks Inc. 2011 – 2016. All Rights Reserved
Hortonworks® の顧客は、新たなビジネス⽬標を達成する、コストを削減することのいずれか
の理由で当社の技術を利⽤しています。
Customer Journeyは、弊社が保持する多くのユースケースを案内する事によりお客様のニー
ズに応えます。
ソーシャル
マッピング
リスク評価
テレマト
リックス
ロス
コントロー
ル
コール分析
センサー
データ
製品設計 M & A
デューデリ
ジェンス
レコメン
デーション
サイバー
セキュリ
ティ
リスク
モデリング
リスクアペ
タイト
ロスコント
ロール
Cat
モデル
調査計画
⽀払い請求
深刻度
カスタマー
サポート
センチメン
ト分析
リスク分析
広告掲載
⽀払い請求
分析
セグメン
テーション
クロス
セル
顧客維持
代理店
スコアカー
ド
不正調査
運⽤コスト
削減
メインフ
レームのオ
フロード
履歴レコー
ド
サービス
としての
データ
パブリック
データ取得
不正予防
デバイス
データ
取り込み
⾼速レポー
ティング
デジタル
保護
不正緩和
⽀払い能⼒
分析
- 6. 6 © Hortonworks Inc. 2011 – 2016. All Rights Reserved
Case Study
Progressiveʼs Journey
Progressiveは、IoTデータを元に「使⽤ベース」保険商品のリスク予
測を⾏いたい
à Progressive Snapshotは、⾞載センサーデバイスから運転データを送信し、
使⽤ベースの保険を提供
à ドライバーから収集された最⼤6ヶ⽉分のデータは、規制の要件に従い、数
年間アーカイブする必要がある
à Progressiveの既存のシステムでは、効率的にスケールすることができない
à 5⽇から7⽇かけても、UBIデータの25%しか流し込むことができない
*UBI – User Based Insurance
- 7. 7 © Hortonworks Inc. 2011 – 2016. All Rights Reserved
Progressiveʼs Journey
安全なドライバへの優遇と
交通安全の向上
à Snapshot plug-in デバイスは運転の詳
細を収集
à Progressiveは、1000万マイル以上の
運転データを保存 (約1600万Km)
à Webアプリ経由で、顧客は⾃⾝の運転
詳細を⾒ることができ、安全向上に努め
ることが可能
à Snapshotとusage-based insurance
は2014年には、Progressiveに2.6 億ド
ルの貢献(約273億円)
Innovate
Renovate
Safe Roads
Claims Notes
Mining
Individual
Driving
Histories
Usage-Based
Insurance (UBI)
Web Log
Analysis
Online Ad
Placement
Sensor Data
Ingest
- 13. 13 © Hortonworks Inc. 2011 – 2016. All Rights Reserved
Apache Communityへの貢献
コミッターの多くがHortonworksの社員です。
Apache Hadoop プロジェクトに関わるコミッター
の約1/3はHortonworksの社員です。Apache NiFiの
⼤半を始めとする多くの重要なプロジェクトに関
わっています。
コミッターはコネクティッド・データプラット
フォームを改良し、⾰新を続けています。
Hadoopのロードマップに関わっています。
コミュニティに対し、重要なリクワイアメントを⾔
える⽴場にいます。
1,500を超えるエコシステムパートナー
Hortonworks テクノロジーパートナー
専⾨家集団: 開発に深く携わるコア・メンバーにより構成
Hortonworks はApache Community
に⾮常に深く関与しています。
- 18. Page18 © Hortonworks Inc. 2011 – 2015. All Rights Reserved
HORTONWORKS DATA PLATFORM
Hadoop
&YARN
Flume
Oozie
HDP 2.3 is Apache Hadoop; not “based on” Hadoop
Pig
Hive
Tez
Sqoop
Cloudbreak
Ambari
Slider
Kafka
Knox
Solr
Zookeeper
Spark
Falcon
Ranger
HBase
Atlas
Accumulo
Storm
Phoenix
4.10.2
DATA MGMT DATA ACCESS GOVERNANCE & INTEGRATION OPERATIONS SECURITY
HDP 2.2
Dec 2014
HDP 2.1
April 2014
HDP 2.0
Oct 2013
HDP 2.2
Dec 2014
HDP 2.1
April 2014
HDP 2.0
Oct 2013
0.12.0 0.12.0
0.12.1 0.13.0 0.4.0
1.4.4 1.4.4 3.3.23.4.5
0.4.00.5.0
0.14.0 0.14.0 3.4.6 0.5.0 0.4.00.9.30.5.2
4.0.04.7.2
1.2.1 0.60.0 0.98.4 4.2.0 1.6.1 0.6.0 1.5.21.4.5 4.1.02.0.0
1.4.0 1.5.1 4.0.0
1.3.1
1.5.1 1.4.4 3.4.5
2.2.0
2.4.0
2.6.0
2.7.1 1.4.6 1.0.0 0.6.0 0.5.02.1.00.8.2 3.4.61.5.25.2.1 0.80.0 0.5.01.7.04.4.0 0.10.0 0.6.10.7.01.2.10.15.0
HDP 2.3
Oct 2015 4.2.0
0.96.1
0.98.0 0.9.1
0.8.1
1.4.1 1.1.2
2.7.3 1.4.6 1.3.0 0.9.0 0.6.02.4.00.10.0 3.4.61.5.25.5.1 0.91.0 0.7.01.7.04.7.0 1.0.1 0.10.00.7.0
1.2.1+
2.1***
0.16.0
HDP 2.5*
2H2016
4.2.0
1.6.2+
2.0**
1.1.2
2.7.1 1.4.6 1.2.0 0.6.0 0.5.02.2.10.9.0 3.4.61.5.25.2.1 0.80.0 0.5.01.7.04.4.0 0.10.0 0.6.10.7.01.2.10.15.0
HDP 2.4
Mar 2016 4.2.01.6.0 1.1.2
Zeppelin
Ongoing Innovation in Apache
0.6.0
* HDP 2.5 – Shows current Apache branches being used. Final component version subject to change based on Apache release process.
** Spark 1.6.2+ Spark 2.0 – HDP 2.5 support installation of both Spark 1.6.2 and Spark 2.0. Spark 2.0 is Technical Preview within HDP 2.5.
*** Hive 2.1 is Technical Preview within HDP 2.5.
- 24. 24 © Hortonworks Inc. 2011 – 2016. All Rights Reserved
Hortonworks DataFlowとHortonworks Data Platformにより、
ビックデータ基盤のエンド・ツー・エンドソリューションを提供します。
Hortonworks Data
Platform
powered by Apache Hadoop
Hortonworks Data Platform
powered by Apache Hadoop
Enrich
Contex
t
Store Data
and
Metadata
Internet
of Anything
Hortonworks DataFlow
powered by Apache NiFi
動的・鮮度が
重要な⾒識
静的・過去データ
による⾒識
Connected Data Platform
データ収集プラットフォーム
- 34. 34 © Hortonworks Inc. 2011 – 2016. All Rights Reserved
Hortonworksが提供する付加価値
Hortonworks の専⾨知識と経験
Apache Hadoop と Apache NiFiのオリジナルアーキテクトが
在籍
Annual Subscriptions
年間サブスクリプションの提供による、状況に柔軟な対応
Apache Committers
お客様からの要望を聞き、お客様が⽬的を達成するためのロー
ドマップ作成の協⼒
Expert Consulting & Training
お客様⾃⾝が実現可能なインテリジェンスをできるだけ効率よ
く培うことの⼿助け
Hortonworks SmartSense™
機械学習をベースとした提案型クラスター環境の
⾃動アドバイスサービス
Integrated Customer Portal
豊富なナレッジベースと、1000時間を超える
WEBベースのトレーニングコンテンツ
STORAGE
STORAGE
ARCHITECT
&
DEVELOP
DEPLOY
OPERATE
Projec
t 1
Projec
t 5
Projec
t 4
Projec
t 3
Projec
t 2
Projec
t 6
EXPAND
プロアクティブなサポート
ナレッジ
ベース
Integrated Customer
Portal
オンデマン
ド
トレーニン
グ
Customer
EnvironmentAny cloud • Hybrid Environment •
Multi-tenant
Hortonworks
SmartSense
ライフサイクルのサポート