DOO-003_Jenkins 作者が語る、Docker コンテナによる継続的デリバリのオススメと新機能のご紹介

1. ©2016 CloudBees, Inc. All Rights Reserved 1©2016 CloudBees, Inc. All Rights Reserved
Jenkins + Docker + Azureで作る
継続的デリバリ
川口耕介 / CTO / CloudBees, Inc.
kk@kohsuke.org / @kohsukekawa

2. ©2016 CloudBees, Inc. All Rights Reserved 2

3. ©2016 CloudBees, Inc. All Rights Reserved 3

4. ©2016 CloudBees, Inc. All Rights Reserved 4
ビルド・エージェント総数

5. ©2016 CloudBees, Inc. All Rights Reserved 5
Source: State of Jenkins Survey Sept. 2015
Jenkinsの利用の拡大

6. ©2016 CloudBees, Inc. All Rights Reserved 6
2013年度サーベイ 2015年度サーベイ
Jenkinsはミッションクリティカル？

7. ©2016 CloudBees, Inc. All Rights Reserved 7
増え続ける Jenkins の利用
ビルドの自動化
デプロイスクリプトの共有
テストの自動化
継続的デリバリ

8. ©2016 CloudBees, Inc. All Rights Reserved 8
優れたソフトウェアを
素早く届けたい
なぜ継続的デリバリ(CD)？

9. ©2016 CloudBees, Inc. All Rights Reserved 9
• 短いサイクルでソフトウェアを少しづつ改善
• コンセプトからビルド・テスト・デプロイまでをより
素早く頻繁に
• 素直で単純な反復可能なプロセスが欠かせな
い
継続的デリバリとは

10. ©2016 CloudBees, Inc. All Rights Reserved 10
• “Netflix deploys a hundred times per day”
• “Amazon deploys every 11.6 seconds”
目標はソフトウェア開発の虎

11. ©2016 CloudBees, Inc. All Rights Reserved 11
• Google Docによるデプロイ手順の作成
• 深夜のデプロイ作業
• 二週間に一度のデプロイ
現実

12. ©2016 CloudBees, Inc. All Rights Reserved 12男坂より © Kurumada Production

13. ©2016 CloudBees, Inc. All Rights Reserved 13
継続的デリバリへの道のり
• 自動化
– 高い再現性
– 時間を短く、頻繁に
• エラーに耐えるアーキテクチャ
• エラーを検出するパイプライン
• エラーを許容するインフラ

14. ©2016 CloudBees, Inc. All Rights Reserved 14
アーキテクチャ・実装技法
• フィーチャーフラグ
• ダークラウンチ
• マイクロサービス

15. ©2016 CloudBees, Inc. All Rights Reserved 15
エラーを検出するパイプライン
dev
qa
production

16. ©2016 CloudBees, Inc. All Rights Reserved 16
• コードレビューの自動検査
• 信頼できるテスト
• ブランチの活用
• 複数の検問
エラーを検出するパイプライン

17. ©2016 CloudBees, Inc. All Rights Reserved 17
インフラ
• エラーを許容
– 青緑デプロイ
– カナリアリリース
• エラーを防ぐ
– 不死鳥サーバ
– Immutableインフラ

18. ©2016 CloudBees, Inc. All Rights Reserved 18
Crawl, Walk, Run

19. ©2016 CloudBees, Inc. All Rights Reserved 19
その為の道具

20. ©2016 CloudBees, Inc. All Rights Reserved 20

21. ©2016 CloudBees, Inc. All Rights Reserved 21
2013 2015
ビルド 95% 97%
テスト 86% 90%
デプロイ 48% 58%
運用 15% 24%
Jenkinsの用途は？

22. ©2016 CloudBees, Inc. All Rights Reserved 22

23. ©2016 CloudBees, Inc. All Rights Reserved 23
jenkins.io/2.0

24. ©2016 CloudBees, Inc. All Rights Reserved 24
その為の道具

25. ©2016 CloudBees, Inc. All Rights Reserved 25
docker pull jenkins
Jenkinsをコンテナ化

26. ©2016 CloudBees, Inc. All Rights Reserved 26
docker run -p 8080:8080 ¥
–v /var/lib/jenkins:/var/jenkins_home ¥
jenkins
Jenkinsをコンテナ化

27. ©2016 CloudBees, Inc. All Rights Reserved 27
• アップデートが簡単
• 将来の引っ越しが簡単
コンテナ化の利点

28. ©2016 CloudBees, Inc. All Rights Reserved 28
• Azure Slaveプラグインを使う
• 利点
– 負荷に応じて自動伸縮
– いつも新築のビルド環境
– WindowsでもLinuxでも
Azure上のビルド環境

29. ©2016 CloudBees, Inc. All Rights Reserved 29
Azure Slaveプラグインの設定

30. ©2016 CloudBees, Inc. All Rights Reserved 30
Azure Slaveプラグインの設定

31. ©2016 CloudBees, Inc. All Rights Reserved 31
Azure Slaveプラグインの勘所
• 30-60分のRetention timeを設定する
• ラベルを活用する
– 悪い例： Standard_D1, Linux
– 良い例： ProjectFoo, NodeJs
• 長すぎる初期化スクリプトを避ける

32. ©2016 CloudBees, Inc. All Rights Reserved 32
ジョブの設定

33. ©2016 CloudBees, Inc. All Rights Reserved 33
Docker プラグイン
Azure上のビルド環境 その２

34. ©2016 CloudBees, Inc. All Rights Reserved 34
Docker プラグイン
Azure Container Service
(with Docker swarm)
Build Agent

35. ©2016 CloudBees, Inc. All Rights Reserved 35
Azure Slave プラグインと比べて
• 利点
– ビルド環境の作成・管理・利用が簡単
– いつも完全に新築のビルド環境
• 欠点
– ワークスペースの再利用なし
– オートスケールなし
– Docker in Docker

36. ©2016 CloudBees, Inc. All Rights Reserved 36
器はできた

37. ©2016 CloudBees, Inc. All Rights Reserved 37
Jenkins 2.0: Pipeline as Code
• 新しい「パイプライン」型の導入
• 作業手順をコードとしてJenkinsfileに記述
• Jenkinsfileをソースリポジトリに保存
• パイプライン実行中にJenkinsを再起動できる
• Jenkinsfileを拡張してよりDRYに

38. ©2016 CloudBees, Inc. All Rights Reserved 38
Dockerコンテナをビルドする例
def imageName = 'jenkinsciinfra/bind'
node('docker') {
checkout scm
// Compute a unique image tag
def imageTag = "build-${env.BUILD_NUMBER}"
// The `docker` variable introduced by the plugin
stage 'Build'
def whale = docker.build("${imageName}:${imageTag}")
// Publish this image to Docker Hub
stage 'Deploy'
whale.push()
}

39. ©2016 CloudBees, Inc. All Rights Reserved 39
Jenkins 2.0: Organization Folder

40. ©2016 CloudBees, Inc. All Rights Reserved 40
Organization Folderの利点
• Jenkinsの設定は一度だけ
• Jenkinsfileをコミットするだけ
• ブランチ別のビルド履歴
• プルリクエストの自動ビルドと結果の通知

41. ©2016 CloudBees, Inc. All Rights Reserved 41
ツールコンテナの活用
node('docker') {
// run gradle with Java8
stage 'build'
docker.image('java:8-jdk').inside {
checkout scm
sh './gradlew --info'
stash name:'war', includes:'build/*.war'
}
// then test with phantomjs
stage 'test'
docker.image('acme:phantomjs').inside {
git url:'.https://github.com/acme/test.git'
unstash 'war'
sh './test.py'
}
}

42. ©2016 CloudBees, Inc. All Rights Reserved 42
ツールコンテナの活用
• Docker Pipelineプラグイン
• 実行環境を精密にコントロール
– Jenkins管理者の負担を軽減

43. ©2016 CloudBees, Inc. All Rights Reserved 43
Jenkins + Docker + Azureのフロンティア
• Docker in Docker
– コンテナ内でコンテナをビルド
• Docker slaveプラグイン

44. ©2016 CloudBees, Inc. All Rights Reserved 44
チームから全社へ

45. ©2016 CloudBees, Inc. All Rights Reserved 45
一家に一台Jenkins

46. ©2016 CloudBees, Inc. All Rights Reserved 46
https://www.flickr.com/photos/grapesteinbeck/
中央集権化

47. ©2016 CloudBees, Inc. All Rights Reserved 47
中央集権化の利点
• Jenkinsの運用の効率化
• ベストプラクティスの開発と普及
• 計算機資源のプール

48. ©2016 CloudBees, Inc. All Rights Reserved 48
CloudBees Jenkins Platform
Private SaaS Edition (PSE)

49. ©2016 CloudBees, Inc. All Rights Reserved 49
PSEでJenkinsの大規模運用
• 自動的なフェイルオーバー
• マルチテナント
• 個々のマスターの配置について悩まない

50. ©2016 CloudBees, Inc. All Rights Reserved 50
まとめ
• 継続的デリバリで幸せになりたい
• Jenkins 2.0を作った
• AzureでスケーラブルなJenkins環境
• まだ進化は続く

51. ©2016 CloudBees, Inc. All Rights Reserved 51