MariaDB Meetup Tokyo 2019 #2 (Japanese/日本語) March 2019

1. MariaDB
最新機能と活用法 #2
2019-03-07
後藤 智 (GOTO Satoru)
Customer Solutions Engineer

2. Agenda
● MariaDB とは
● MariaDB Platform X3
● MariaDB Platform Managed Service
● ClustrixDB とは
● MariaDB Enterprise Server

3. MariaDB とは

4. EIB(European Investment Bank)
$27M 出資
Alibaba $27M 出資
Microsoft : Platinum Sponsor
(MariaDB財団)
2017 2018
MariaDB Corporation 最新動向
MammothDB 買収
Alibaba Cloud
ApsaraDB RDS for MariaDB TX
ServiceNow出資 / Clustrix買収
Azure Database for MariaDB : GA

5. MariaDB releases
Feb 2010 MariaDB 5.1
Nov 2010 MariaDB 5.2
Apr 2012 MariaDB 5.3
Feb 2012 MariaDB 5.5
Mar 2014 MariaDB 10.0
Oct 2015 MariaDB 10.1
May 2017 MariaDB 10.2.6 GA
May 2018 MariaDB 10.3.7 GA
Feb 2019 MariaDB 10.4.3 RC
https://downloads.mariadb.org/mariadb/+releases/
https://github.com/MariaDB/server/releases

6. Technology & InternetTelecom
Retail & EcommerceTravel
Financial Services Gvmt & Education
Media & Social
Millions Users in
45 Countries Trust Critical
Business Data to MariaDB

7. DB-Engines Ranking of Relational DBMS - Feb. 2019
8位

8. Customer and Use Cases
• Multi-terabyte DB
• 80M transactions / month
• 50+ Node Cluster
• Multi-billion rows
• 600 Million reads/second
• 250 servers, 600G + 1.5T archive
• 10M travelers/quarter
• 4M transactions/ month
• ~14TB in MariaDB
production clusters
• Over 150 servers
• 150-200k queries / sec on the MariaDB Cluster
• 6TB and millions of Call Data
Records
• Over 60 TB
• 70 million rows per day
• 4 billion impressions per month
• 3 to 10 TB
• Over billion rows, most tables
100’s of millions of rows
• Over 5 TB in Pay Per click application

9. MariaDB 財団のスポンサー
Platinum Gold

10. Michael “Monty” Widenius
The Soul of
Open Source
Founder & CTO of MariaDB
MariaDB was created to preserve
openness and community, so that
we can push ahead faster with the
capabilities for tomorrow’s
applications.
”
“

11. GitHub repository
https://github.com/MariaDB/server
JIRA
https://jira.mariadb.org/projects/MDEV
True Open Source
全テストケース : 公開
バグ/機能追加リクエスト

12. MariaDB 独自機能/製品
• MariaDB ColumnStore : 列指向 / BI / 分析
• MariaDB Server 10.3+ : PL/SQL 互換
• ClustrixDB : 分散スケールアウトデータベース
ただし現状オープンソースではない

13. MariaDB Platform X3
https://mariadb.com/products/mariadb-platform/

14. MariaDB TX
MariaDB Server
MariaDB MaxScale
InnoDB/MyRocks
MariaDB AX
MariaDB Server
MariaDB MaxScale
ColumnStore
App/dev
MariaDB
TX
BI/data science
MariaDB
AX
TX/AX

15. MariaDB TX 3.0
MariaDB Server 10.3
MariaDB MaxScale 2.2
InnoDB/MyRocks
MariaDB AX 2.0
MariaDB Server 10.2
MariaDB MaxScale 2.2
ColumnStore 1.2
MariaDB Platform X3
MariaDB MaxScale 2.3
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
X3

16. アプリケーション開発
MariaDB Platform X3
MariaDB MaxScale 2.3
CDC
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
Transactional Analytical
CDC

17. DBプロキシによりクエリ精査，ルーティング
MariaDB Platform X3
MariaDB MaxScale 2.3
CDC
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
Transactional Analytical

18. DBプロキシによりクエリ精査，ルーティング
CDCストリーミングにより，OLTPインスタンスからOLAPインスタン
スにレプリケーション
MariaDB Platform X3
MariaDB MaxScale 2.3
CDC
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
Transactional Analytical

19. Containers
MariaDB Platform X3
MariaDB MaxScale 2.3
CDC
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
Transactional Analytical
Kubernetes (Helm) Docker (Compose)

20. Import bulk data
Containers
MariaDB Platform X3
MariaDB MaxScale 2.3
CDC
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
Transactional Analytical
Kubernetes (Helm) Docker (Compose)
Spark connector
C/Java/Python API
Ingest streaming data
Kafka connector

21. Applications
Containers
MariaDB Platform X3
MariaDB MaxScale 2.3
CDC
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
Transactional Analytical
Kubernetes (Helm) Docker (Compose)
C JDBC ODBC Node.js
Ingest streaming data
Kafka connector
Import bulk data
Spark connector
C/Java/Python API

22. Applications
Containers
MariaDB Platform X3
MariaDB MaxScale 2.3
CDC
MariaDB Server 10.3
InnoDB/MyRocks
MariaDB Server 10.3
ColumnStore 1.3
Transactional Analytical
Kubernetes (Helm) Docker (Compose)
C JDBC ODBC Node.js
Ingest streaming data
Kafka connector
Administration
SQL Diagnostic
Manager
SQLyog
MariaDB Backup
MariaDB Flashback
Import bulk data
Spark connector
C/Java/Python API

23. Scalability

24. Hybrid Workloads
アプリケーション :
トランザクション/ 機械学習
● 軽量DWHの機能制限
● フル機能DWHが必要
OLTPデータ増大

25. Hybrid Workloads
アプリケーション :
トランザクション/ 機械学習
● 軽量DWHの機能制限
● フル機能DWHが必要
OLTPデータ増大
膨大な数のアプリケーションユーザ，ト
ランザクション
● 最新/最近のデータのみアクセス可
● 全履歴へのアクセスが必要
履歴データの活用

26. Oracle In-Memory Column Store
Microsoft SQL Server ColumnStore Indexes
(Clustered or Nonclustered)
IBM Db2 Shadow Tables
MySQL Enterprise None
EDB Postgres Platform None
Hybrid Workloads: options

27. Hybrid workloads: full comparison
* IBM Db2 Shadow Tables, ** Oracle IM column store can read from on-disk row storage if needed
Oracle Microsoft IBM * MariaDB MySQL Postgres
Row storage (OLTP) Yes Yes Yes Yes Yes Yes
Sharded Yes No Yes Yes No No
Columnar storage (OLAP) Yes Yes Yes Yes No No
Disk-based No ** Yes Yes Yes - -
Distributed Yes (RAC) No No Yes - -

28. Microsoft
SQL Server
Columnar storage
Row storage
Microsoft
SQL Server
Row storage
Columnar storage
Application
Connection 1 Connection 2
Transactional Analytical

29. Application
Connection 1
MariaDB
Server
Row storage
MariaDB Server
Columnar
storage
MariaDB
MaxScale
Transactional Analytical

30. MariaDB Server
(Spider)
Application
Connection 1
MariaDB
Server 1
Row storage
MariaDB
Server 2
Row storage
MariaDB
Server n
Row storage
MariaDB Server
(ColumnStore)
Sharding
MariaDB
MaxScale
Transactional Analytical
MariaDB Server
Columnar
storage

31. MariaDB Server
(Spider)
Application
Connection 1
MariaDB Server
(ColumnStore)
Node 1
Columnar
storage
Node 2
Columnar
storage
Node n
Columnar
storage
Distributed storage
MariaDB
MaxScale
Transactional Analytical
MariaDB
Server
Row storage

32. MariaDB Server
(Spider)
Application
Connection 1
MariaDB
Server 1
Row storage
MariaDB
Server 2
Row storage
MariaDB
Server n
Row storage
MariaDB Server
(ColumnStore)
CS node 1
Columnar
storage
CS node 2
Columnar
storage
CS node n
Columnar
storage
Sharding Distributed storage
MariaDB
MaxScale
Transactional Analytical

33. Hybridクラウド対応

34. MariaDB Platform
MariaDB Server
MariaDB Server
MariaDB Server
MariaDB Server
MariaDB Server
InnoDB /
MyRocks
MariaDB Server
ColumnStore
オンプレミス:
OLTP
トランザクション
データは手元に
パブリッククラウド :
OLAP
分析データは顧客の
近くに

35. MariaDB Platform
オンプレミス:
OLAP
分析データを手
元にトランザク
ションデータを
集約
パブリッククラウド :
OLTP
トランザクションデー
タは顧客のち各kに，
世界中に分散
MariaDB Server
MariaDB Server
MariaDB Server
ColumnStore
MariaDB Server
MariaDB Server
MariaDB Server
InnoDB/MyRocks

36. データベースの集約

37. Service #2
DB #1
RDBMS, transactions
(Oracle)
DB #2
NoSQL, scalability
(MongoDB)
DB #3
Columnar, analytics
(Vertica)
注文 カート webアナリティクス
Service #1 Service #3

38. MariaDB Platform
カート
MariaDB Server MariaDB Server MariaDB Server
注文 webアナリティクス
MyRocks Spider
Shard 2Shard 1 Shard 3
ColumnStore
MariaDB MaxScale
Service #2Service #1 Service #3

39. コンテナ・サポート

40. MariaDB Platform X3 in 1 コンテナ
● MariaDB Platform “in-a-box”
● 設定済 : すぐに利用可能
● 開発用途
https://github.com/mariadb-corporation/mariadb-platform-docker/tree/master/single-container

41. MariaDB Platform X3 in 1コンテナ

42. MariaDB Platform
Managed Service

43. MariaDB Platform Managed Service
Provision
Install
Configure
Optimize
Recover
Maintain
Support
アーキテクチャ・デザイン
災害復旧(DR)
セキュリティ監査
パフォーマンス・チューニング
クエリ最適化
スキーマ変更
DBアップグレード
DB移行
技術サポート
コンサルティング
汎用DB
機能制限
サポート
最新版がすぐに利用できない
ダウンタイム
AWS RDS/Aurora MariaDB Platform
Managed Service

44. MariaDB vs. Amazon
AWS RDS AWS Aurora MariaDB Platform
Hybrid クラウド Preview No Yes
Hybrid ワークロード No Limited Yes
プロアクティブケア No No Yes
最新版の利用 No No Yes
技術サポート No No Yes
コンサルティング No No Yes
セキュリティパッチ No No Yes

45. MariaDB vs. Amazon
Transaction replay and causal reads too!
AWS RDS AWS Aurora MariaDB Platform
マルチマスター No Preview Yes
Oracle 互換性 Yes No Yes
テンポラルテーブル Yes No Yes
DBファイヤウォール No No Yes
データマスキング No No Yes
CDC No No Yes
Kafka コネクタ No No Yes

46. MariaDB Server 顧客事例

47. Spider : customer use case
Tencent Games
● 数千インスタンス規模で利用
● Spiderの開発に貢献
● MariaDB財団のスポンサー

48. PL/SQL互換性: DBS Bank Singapore
M|18 DBS Bank’s Journey with MariaDB
https://www.slideshare.net/MariaDB/m18-dbs-banks-journey-with-mariadb
DBSはシンガポールの銀行で、1968年にシンガポール政府により開発に対する融資機関
として設立された。DBS銀行は東南アジアにおいて資産において最も大きな銀行で、ア
ジアの中でも大規模な銀行の1つである。香港とシンガポールにおいて、一般銀行業務
、資金調達、資産運用、証券仲介、負債処理において優位な位置を確保している。

49. Use Case : DBS Bank Singapore (Feb 2018)
https://www.slideshare.net/MariaDB/m18-dbs-banks-journey-with-mariadb

50. Use Case : DBS Bank Singapore (Feb 2018)

51. Use Case: ServiceNow (Feb 2018)
https://www.slideshare.net/MariaDB/m18-servicenow-keynote
2019年2月時点
100,000
インスタンス

52. Use case: ドワンゴ様
● 課題
マイクロサービス化への対応のためデータベース運用効率化と安定的
運用
● 解決策
MariaDB Galera Clusterによる新データベース基盤構築
● 結果
○ ダウンタイム大幅削減により安定した運用を実現
○ データベース基盤集約化、運用コスト削減

53. MariaDB ColumnStore
顧客事例

54. MariaDB ColumnStore Customers
MarTech Technology/Internet/IoTFinance Health Care
Services
Public Sector

55. IHME - Institute of Health Metrics and Evaluation
● Use Case:
○ Public Health Data Analytics
● Competition:
○ Percona InnoDB, MemSQL
● Why ColumnStore:
○ InnoDB (Percona) reached
performance limit w/ max tuning
for 4 TB data
○ ColumnStore easy to use
● Data Volume: Started with 4.2 TB,
with goal to go to 30TB of data in 5
years
Wrong database/storage engine (MySQL InnoDB) for analytics use case
Application Application Application Application Application
http://www.healthdata.org/results/data-visualizations

56. 日立製作所様
● オンプレミス
● Tableau による定型レポート
● Pentaho Data Integration(PDI)上でGUIによるデ
ータインポート(1.2以降)

57. Download
https://mariadb.com/downloads
1
Read the Technical overviews
https://mariadb.com/resources/datasheets-guides
2
Knowledge Base
https://mariadb.com/kb
3
Smart Style 様 TECH BLOG
https://www.s-style.co.jp/blog
4
Getting started with MariaDB

58. ClustrixDB
分散スケールアウトRDBMS
New

59. ClustrixDBとは
Applications
アプリケーション変更は最小限に
no Sharding
no Replication
アプリケーションからは
MariaDB/MySQL サーバとして扱える
Load Balancer
Applications
MariaDB/MySQL
*ClustrixDB is NOT open sourced, a proprietary software

60. MariaDB 製品の中での位置づけ
AnalyticalHigh-Scale
Transactional
ClustrixDB
MariaDB
Server
MariaDB
ColumnStore
MariaDB Galera
Cluster
For High Availability on
Mainstream
Workloads
Mainstream
Database Workloads

61. ClustrixDB: スケールアウト, Fault-tolerant, MariaDB互換
ClustrixDB
ACID Compliant
Transactions & Joins
Optimized for OLTP
Built-In Fault Tolerance
Flex-Up and Flex-Down
Minimal DB Admin
Also runs great in
the Data Center
Built to run
in the Cloud

62. ClustrixDB国内事例
https://www.slideshare.net/rakutentech/dbtechshowcase2013tokyo

63. ClustrixDB概要動画
https://youtu.be/5qu8TzAjy_o
MariaDB ClustrixDB 9.1 documentation
http://docs.clustrix.com/

64. New topics at OpenWorks 2019
New

65. News at OpenWorks 2019 : Enterprise Server
● サブスクリプション購入顧客にのみ提供
● 専用 MariaDB Backup
● 改良された監査プラグイン
● MariaDB (Galera) ClusterにおけるフルData-at-Rest
Encryption
● より厳格な品質保証/テスト
● よりセキュアな設定が標準となる

66. News at OpenWorks 2019 : Enterprise Server
● Release Integrity
distributed securely with a clearly established chain
of custody from MariaDB to customers for ensuring
that binaries cannot be tampered with.
● MariaDB Enterprise Server 10.4
○ 2019年春頃にリリース予定
○ MariaDB Enterprise Server 10.2 / 10.3も

67. News at OpenWorks 2019 : Enterprise Server
MariaDB announces MariaDB Enterprise Server and
welcomes Amazon’s Mark Porter as an advisor to the
board of directors
https://hub.packtpub.com/mariadb-announces-mariadb-enterprise-server-and-
welcomes-amazons-mark-porter-as-an-advisor-to-the-board-of-directors/
http://www.odbms.org/2019/03/mariadb-welcomes-proven-cloud-database-
leader-mark-porter-as-board-advisor/

68. HammerDB HPC-C ベンチマークテスト
MariaDB
Amazon RDS

69. 米ドラッグストア大手がMariaDBなどへ移行
“Azureのクラウドへの移行を加速するために、デ
ータセンター全体を1年半から2年以内にクラウド
に移すことを我々は必要としている。Oracleを基
盤とする現在のアプリケーションをクラウドに移
行すると共に、Oracleに代わるリレーショナルデ
ータベースであるMariaDB向けのアプリケーショ
ンに転換する計画だ”
https://tech.nikkeibp.co.jp/it/atcl/idg/14/481709/030600519/

70. お問合せ / Social Media

71. MariaDB Japan LinkedIn Group
https://www.linkedin.com/groups/12169417/

72. Place Image Here
スマートスタイル様
TECH BLOG
https://www.s-style.co.jp/blog/category/tech/mariadb/
毎週投稿
Eメール更新通知なし(no subscription)
RSSフィード配信

73. MariaDB Platform / ClustrixDB に関するお問い合わせ

74. 2023年を迎えてもなお日本の大企業における
基幹系システムの80%が商用RDBMSを
オンプレミスで運用し続ける
ガートナージャパン - 2019-02-26
https://www.publickey1.jp/blog/19/202380rdbexcel.html

75. 2022年末まで臨機応変なデータ分析を行う上で最も
利用される分析ツールはExcelであり続ける
ガートナージャパン - 2019-02-26

76. Thank you

77. Appendix
過去のMariaDB Meetup講演資料

78. MariaDB Meetup 2019 #1 資料 (01/29)
https://www.slideshare.net/GOTOSatoru/mariadb-meetup-tokyo-2019-01-129692779

79. Appendix
MariaDB Platform Transactional HA

80. Master/Slaves
非同期レプリケーション
+ MaxScale自動failover
1. Master に障害
2. MaxScale MariaDB Monitor : master_down 検知
3. MaxScale : Slave を新しい Masterに自動昇格
4. MaxScale : 新MasterにWriteクエリをルーティング
Master/Slaves + Read/Write split routing
2
MaxScale

81. MaxScale BSL 1.1
BSL(Business Source License)
https://github.com/mariadb-
corporation/MaxScale/blob/2.3/LICENSE
.TXT
DBサーバインスタンス数 < 3
production環境でも無償利用可
例:
Master x1 - Slave x 1
UM+PM combined x 2
2
MaxScale

82. MaxScale BSL 1.1
BSL(Business Source License)
https://github.com/mariadb-
corporation/MaxScale/blob/2.3/LICENSE
.TXT
DBサーバインスタンス数 > 2
production環境ではサブスクリプション
購入が必要
2
MaxScale

83. MariaDB Galera Cluster
Multi-Master
Synchronous Replication
Galera Cluster + Read/Write split routing
MaxScale : 1ノードを”Master”として選択
Writeクエリは”Master”にのみルーティlング
全ノードがMasterのため，1ノードダウンしても
MaxScaleが他ノードを新たな”Master”として選
定
Galera Cluster は3ノード以上奇数のノード数が
必要のため，productionで利用の場合，BSL 1.1に
抵触
MaxScale

84. Key Feature Self Support MariaDB Support
Performance
Scalability
Tuneability
MariaDB Old Versions support
Galera Cluster up to L3 support
MaxScale up to L3 support
Security Customer Notification
RDBA Services
Consulting Services
MariaDB Monitoring tool
Self Support vs. MariaDB Support