Mais conteúdo relacionado
Semelhante a データを集めて貯めて分析する… 最先端のテクノロジーが詰まったIBMクラウドのご紹介 (20)
Mais de IBM Analytics Japan (20)
データを集めて貯めて分析する… 最先端のテクノロジーが詰まったIBMクラウドのご紹介
Notas do Editor
- 今日のデモのテーマは、こんなシナリオに沿っています。例えばIOTデータの活用の検討をやる場合にIBMのクラウドはこんなにも便利なのです、と言う話です。
何を言ってるかというと、
データ活用をするためには、分析環境の準備とどうデータを活用するのか、という大きく2つのことをやらなければなりません。
この分析環境の構築の手間を極小化する、ということです。
極小化、もっと具体的に言うと、インフラ構築をやったことがない、例えば分析するユーザのみで分析環境を構築できます。
- 想像していただきたいのですが、環境を構築するのに、どれくらい時間がかかりますか?
オンプレミスだったら、HW調達して、ソフトウエア入れて、設定して、、、、 結構、いやかなり大変です。
環境構築だけで数週間たってしまうかもしれません。
クラウドだったら、個々のサービスの立ち上げは容易かもしれません、が、サービス間の連携に別途開発が必要かもしれません。
IBMのクラウドは、当たり前に享受できる、環境構築の俊敏性に加えて、すべてをプログラムレスで、環境を構築できます。
分析まで見据えたかゆところに手が届くテクノロジー、
誰でも使える便利で簡単な操作感を、提供することができます。しかも、プログラムレスで。
ここに特に着目ください。
- まずはデータを持ってくるところのデモです。
貯めるデータベースを作って、データを持ってきて、そしてデータを加工します。
- いろんなところからデータを持ってこれるオープン性、
そして、オープンソーステクノロジーのsparkを使って、インメモリで高速に処理します。
誰でも使えるオープン性の高い操作性、どんなデータソースにもオープンに、そして、オープンソーステクノロジーを使って、素早くデータを持ってくることができます。
- 手持ちのCsvファイルもあるでしょう。
これをデータベースヘ持って行くでもです。高速にしかも簡単にデータをアップロードすることができます。
- ネットワーク帯域を使い切るテクノロジーと、
すべての操作がGUIにて実行できます。これはIBMだけのユニークな機能です。
- IOTデータは通常JSONが飛んできます。このままでは分析できません。
実際に分析するときには、表形式にする必要あります。
このCloudantからDb2warehouse on cloudへは自動でJSON形式をRDB形式へ変換する機能があります。
これはIBMのユニークな機能です。
GUIの操作だけで、IOTデータを分析できる表形式のデータへ変換することができます。
本当はAPIだが、今回はcurl。変換するのは強調!なんで必要があるのかも含めて
- ここまでで、データを引っ張ってくる環境ができました。
分析する環境も同じ要領で構築できます。
Dashの画面から行く
スクリプトの打ち込みは極力少なく
Dashの画面から行く
スクリプトの打ち込みは極力少なく
Web上でSQL実行は強調する!
Excelはけしてもいいかも
- ノンチューニングDBです。
テクノロジーについては、ここでは語り尽くせないので、この後のmikeさんのセッションでのお楽しみなのですが、
分析パフォーマンスにおける最大の悪であるディスクIOを、
最先端のテクノロジー(インメモリー*カラムナー機能)で極力減らしています。
さらにはこれにIBMの数多くの特許を使ってさらにIOを減らしています。
これにより、データを入れるだけで、分析することができる、LOAD&GOを実現してます。
また、単なるデータベースではなく、分析することも見据えたデータベースサービスです。
SQL/Excel/Rで分析できるコンソールも含めてのサービスです。
面倒な設定や個別の対応が必要ありません。
もちろん、世にある様々な分析ツールも繋げることができます。
- もし、実感いただけたのであれば、幸いです。
- 売りを入れる
dashDBのよさ
IOTデータノ活用、売りを入れる