2011年12月8日開催された、クラウドストレージ研究会において行った Lightning Talk ならぬ Lightning Demoの資料です。都内DCに構築したInfiniBand + glusterfs の環境で、OpenStack Nova/Swift/Glance/Keystone/Dashboardの主要5コンポーネント全部入りで動作させ、Live Migration を動かして見せました。

1. 第四回 クラウドストレージ研究会資料
Lightning Demo (?)
An IaaS over gluster & InfiniBand
December 8, 2011
Masanori ITOH
VIOPS Transport SIG (Co-Chair)
Copyright 2011 (c) Masanori Itoh. SIG
VIOPS Transport 1

2. おことわり
• 私と同姓同名の人が、某IaaSの宣伝をして回っ
ているらしいですが、なんら関ありません
• 本LTは、私の勤務先とは、何ら関係ありません
Copyright 2011 (c) Masanori Itoh. SIG
VIOPS Transport 2

3. とおりすがりのデモ環境
多段ssh トンネル (*1) 制御 Node
Nova管理サーバ群(api, scheduler,
インターネット network, volume, rabbitmq, mysql etc.),
OpenStack Dashboard,
glance, swift-proxy, ganglia 等が動作
クラスト研会場
デモPC Vyatta
GbE サービスネットワーク
（VMのトラフィック等）
コマンド操
作等はこ
こから行 V V V V V V
M M M M M M
います 制御Node
Compute Compute Compute Compute
(*1)
Node Node Node Node
InfiniBand ネットワーク（主にストレージ周りのトラフィック）
glusterfs による共有FSにVMイメージを配置
Copyright 2011 (c) Masanori Itoh. SIG
VIOPS Transport 3

4. とおりすがりのデモ環境（拡大）
HW/SW諸元： glusterfs 条件：
QDR InfiniBand HCA + 各ノードの /mnt/sdb1 を brick として、
Scientific Linux 6.1(x86_64) + replica 3 で、volume 作成
OFED 1.5.3 + 各ノード上の glusterd をサーバとして
glusterfs 3.3beta2 + fuse mount
OpenStack diablo/stable
glusterfsによる共有FS GbE
volume: gvol1 /mnt/gluster1 /mnt/gluster1 /mnt/gluster1
fuse mount
brick /mnt/sdb1 /mnt/sdb1 /mnt/sdb1
QDR InfiniBand (gluster と OpenStack swift のトラフィックが流れる）
Copyright 2011 (c) Masanori Itoh. SIG
VIOPS Transport 4

5. 今後やりたいこと
gluster (と、できれば InfiniBand） の(台数)スケール実験
できれば、最低１００台位
gluster （と、できれば InfiniBand）の対故障性実験
いろんなパターンで…
OpenStackからの InfiniBand 制御
Quantum とか
etc.
悩みは（十分わかった）人手（と設備）が足りないこと… :(
Copyright 2011 (c) Masanori Itoh. SIG
VIOPS Transport 5

6. 宣伝
VIOPS : 仮想化インフラストラクチャオペレーターズグループ
趣旨とか活動については、HPをごらんください！
InfiniBand Day とかやってます ☺
過去４回開催！
ＨＰ http://viops.jp/
ML viops@viops.jp
Copyright 2011 (c) Masanori Itoh. SIG
VIOPS Transport 6

7. えっ。。。？
OpenStack(非公式)ロゴ ☺
Copyright 2011 (c) Masanori Itoh. SIG
VIOPS Transport 7