社内勉強会で発表したスライド http://shanon-tech.blogspot.jp/2016/03/docker-inside-containers.html

1. コンテナの中のコンテナ
～Docker inside containers～
株式会社シャノン Platform Technologyグループ
藤倉 和明

2. 1
お？

3. 2

4. 3
OpenVZコンテナの中で
Docker動かせたら色々捗りそう

5. 4
試してみた

6. 5
環境
ホストサーバ ：AWSのEC2
instance-type : m3.medium
ホストサーバOS ： OpenVZ
(2.6.32-042stab106.4)
Amazon EC2

7. 6
セットアップ
042stab105.4以降のOpenVZを用意
vzctl 4.9以降のバージョンを用意
※ Paravirtualの場合はOpenVZカーネルをビルドする必要有り

8. 7
セットアップ
とりあえず流れに沿って
コマンドを実行＆実行して
OpenVZコンテナを立ち上げる

9. 8
セットアップ
CentOS6の場合はOpenVZコンテナ内で
cgroup用のmountを実施する必要がある

10. 9
コンテナの中でDockerを起動！
Docker daemon
起動したっぽい

11. 10
docker runでコンテナ起動
centos imageを
pullし始めた
# docker run –i –t centos /bin/bash

12. 11
Docker daemon
Dockerコンテナ
あっさり起動

13. 12
Hostから見たプロセスツリー
OpenVZ コンテナのinit ->
Docker daemonの下にDocker
container のプロセスツリー ->

14. 13
Amazon
EC2
container1 container2
Host instance
ディレクトリ構造はこんな感じだった
/vz/root/<
container1 _id>
/var/lib/docker/
/
/vz/root/<
container2 _id>
/var/lib/docker/
container1のdockerのディレクトリはHost instanceから見て /vz/root/< container1 _id>/var/lib/docker/

15. 14
Amazon
EC2
eth0
container1 container2
veth1 veth2
eth0 eth0
br0
Host instance
ネットワーク構造はこんな感じになってた
docke
r0
veth_d
ocker1
eth0
docke
r0
veth_d
ocker1
eth0
Bridgeを使って親子間のネットワーク接続

16. 15
仮想サーバ（EC2）の中に
仮想サーバ（OpenVZ）立てて
さらに仮想サーバ（Docker）立てた感じ

17. 16
その他試してみた事
１：自分の環境をそのままimport
２：HostサーバでDocker daemon起動

18. 17
自分の環境をimport
今動かしている自分の開発環境を
Docker container 化して検証する事がで
きますよ
でできる。
excludes.listは/dev/とか/proc/とか/sys/を除外するように記述する。
１：tar cfzp /tmp/iamge.tar.gz / -X /tmp/excludes.list # 容量等要注意！
２：cat iamge.tar.gz | docker import - myserver/v1
３：docker run –I –t -p 8080:8080 myserver/v1 /bin/bash

19. 18
自分の環境をimport
これができると、自分の環境をそのまま試して壊せる。
opensslとかglibcとかのバージョン上げてみたいじゃ
ん？
自分の環境でDeployの検証とか手軽にしたいじゃ
ん？
もう怖くないよ！

20. 19
HostサーバでDocker daemon起動
OpenVZコンテナでbridgeとか、
netfilter(iptables）が使えない場合もある
ので、それを回避する手段を考えてみた

21. 20
Amazon
EC2
eth0
container1
veth1
eth0
br0
Host instance
今回試した構成はこんな感じになってたのを
docke
r0
veth_d
ocker1
eth0
Docker
client
Docker container

22. 21
Amazon
EC2
eth0
container1
veth1
eth0
br0
Host instance
こんな感じにしてみた
docke
r0
veth_d
ocker1
eth0
Docker
client
Docker container

23. 22
どゆこと？

24. 23
Hostサーバでdocker daemonを起動させ
る。その時のオプションに一工夫
こんな感じでdaemon起動させると
OpenVZコンテナ内にリポジトリが出来て、
docker daemonと通信するsocketファイル
ができる。
# docker -H unix:///vz/root/<ctid>/var/run/docker.sock --
graph=/vz/root/<ctid>/var/lib/docker/ -d

25. 24
Amazon
EC2
eth0
container1
veth1
eth0
br0
Host instance
利用者目線ではcontainers in container 的な使い方ができる
docke
r0
veth_d
ocker1
eth0
Docker
client
Docker container
OpenVZ コンテナ内から
Hostサーバで起動してる
Docker daemonの操作が
できる！
docker run ～
※ 注意点 ※
Host instanceとOpenVZ containerではDockerのバージョンを合わせておくこと。APIバージョン違うとコケるよ

26. 25
Docker便利だね
これでもっと開発が楽しくなる？

27. 26
シャノンでは一緒に楽しく開発してくれる
メンバーを募集中です！
楽しい開発環境を提供する事に悦びを感じら
れるインフラエンジニアも募集中です！
https://www.green-
japan.com/company/1632

28. 27
おしまい
※ 本スライドは2016/03/09の社内
勉強会での資料を修正したものです