1. Proprietary + Confidential
Google Cloud で実践する SRE
2021.06.29
篠原 一徳 (kazshinohara@) Google Cloud Japan 合同会社

2. Proprietary + Confidential
1. SRE の基本

3. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
“ SRE とは、ソフトウェアエンジニ
アに運用の設計を依頼するときに
起きることです。”
ベンジャミン・トレイナー・スロス
Vice President of 24x7 Engineering, Google

4. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
原則１
いかなるシステムにおいて最も重要な機能は、信頼性である。

5. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
原則２
監視が信頼性を決めるのではない。ユーザーが決めるのだ。

6. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
原則３
巧妙に設計されたソフトウェアは 99.9%
巧妙に設計された運用は 99.99%
巧妙に設計されたビジネスは 99.999%

7. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
“ 可用性 100% を信頼性の目標
とすることは間違いである。”
ベンジャミン・トレイナー・スロス
Vice President of 24x7 Engineering, Google

8. Proprietary + Confidential
2. DevOps と SRE

9. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
ゴールの不一致
開発者
速度
運用者
安定性

10. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
同じツール、同じ手法を使う エラー予算 失敗のコストを下げる
手作業を自動化することを推奨する 運用はソフトウェア工学の問題と考える
組織の壁を減らす
失敗を普通のこととして
受け入れる
段階的に変更を加える
ツールと自動化を活用する すべて測る
トイルも信頼性も定量化する
SRE
DevOps

11. Proprietary + Confidential
© 2021 Google LLC. All rights reserved.
5 つの主要な分野
1. 組織の壁を減らす: 同じツール、同じ手法を使う
2. 失敗を普通のこととして受け入れる
: エラー予算
3. 段階的に変更を加える: 失敗のコストを下げる
4. ツールと自動化を活用する
: 手作業を自動化することを
推奨する
5. すべて測る: 運用はソフトウェア工学の問題ととらえ、トイ
ルも信頼性も定量化する
class SRE implements interface DevOps
DevOps
IT 開発、運用、アーキテクチャ、ネットワーク、セキュリ
ティのサイロを解消するために作られた、一連の慣行、
ガイドライン、および文化
Site Reliability Engineering
うまく機能することがわかった一連の慣行、それらの慣
行に命を吹き込む信念、および仕事上の役割

12. Proprietary + Confidential
3. 信頼性を定量化していく

13. © 2021 Google LLC. All rights reserved.
用語集
SLI
サービスレベル指
標。巧妙に定義され
た、サービスが必要
十分に機能している
ことを示す指標。
• SLO を決める際に
使います
• func(metric) <
threshold
SLO
サービスレベル目
標。成功したインタラ
クションの割合に対し
て設定された目標。
• 目的を決めます
SLA
サービスレベル保証。
ビジネスへの影響。
• 結果を伴う対外的な
取り決め。通常は使用
料の割引や返金などの
金銭的なやりとりが発
生する。
CUJ
クリティカル ユーザー
ジャーニー。ユー
ザーが目的を完遂す
るために行う特定の
動作。
• SLI を決める際に使
います
エラー予算
許容できる不具合の割
合。1 - SLO
• リリース速度とサービス
信頼性のバランスをとる
のに役立ちます

14. © 2021 Google LLC. All rights reserved.
オンラインブティック
https://github.com/GoogleCloudPlatform/microservices-demo

15. © 2021 Google LLC. All rights reserved.
クリティカル ユーザー ジャーニー
買い物客として、店で販売されてい
る商品の一覧を見たい。

16. © 2021 Google LLC. All rights reserved.
サービスレベル指標 (SLI)
SLI の種類: 可用性
SLI の仕様: ProductCatalogService へのリクエストに対する全てのレスポンスのうち、
HTTP レスポンスコード2xx、3xx、4xx を返すもの(=良いレスポンス) の割合。
ただし 429 を除く。
SLI の実装: Web ログから HTTP レスポンスコードを特定する
ProductCatalogService からの良いレスポンス

17. © 2021 Google LLC. All rights reserved.
サービスレベル目標 (SLO)
過去 28 日間の ProductCatalogService のレスポンス
のうち 99.9% が良いレスポンスでなければならない
ProductCatalogService のレスポンスのうち 99.9％
が良いレスポンスでなければならない
SLO は 目標 と 測定期間 を含んでいなければなりません

18. © 2021 Google LLC. All rights reserved.
CUJ と SLI と SLO
CUJ: 買い物客として、店で販売されている商品の一覧を見たい。
SLI の種類: 可用性
SLI の仕様: ProductCatalogService へのリクエストに対する全てのレスポンスのうち、
HTTP レスポンスコード2xx、3xx、4xx を返すもの(=良いレスポンス) の割合。
ただし 429 を除く。
SLI の実装: Web ログから HTTP レスポンスコードを特定する。
SLO: 過去 28 日間の ProductCatalogService のレスポンスのうち99.9% が良いレスポンスで
なければならない。

19. Proprietary + Confidential
4. Google Cloud で実践しよう

20. Proprietary + Confidential
Google Cloud の 運用系ツール スイート
( 旧名: Stackdriver )
メトリクス監視から、ロギング、
APM までをカバーする
すべての機能が SaaS 型で提供される
Cloud Operations
Monitoring Logging
Application Performance Management(APM)
Trace Debugger Profiler

21. Proprietary + Confidential
Google 内部の Practice を
Google Cloud のユーザーにも
Google の SRE の原則を適用
Google Cloud サービスは
0 Config で Logging / Monitoring
Google Cloud ユーザー
Google Cloud Console
Google プロダクト
(Search, Ads, Youtube, Geo etc.)
Google SRE and Developers
Logging Monitoring
Core Observability Platform
Cloud Operations の特徴

22. Proprietary + Confidential
SLO Monitoring
Cloud Monitoring の機能
取得済みメトリクスから
SLI を選択し、SLO を定義
以下のプロダクトにデプロイ済み
アプリケーションは、自動的に SLO
Monitoring 対象のサービスとして
検出される
● Anthos Service Mesh
● Istio on GKE
● Google App Engine

23. Proprietary + Confidential
5. デモ
Anthos Service Mesh で SLO を設定してみる

24. Proprietary + Confidential
6. まとめ

25. Proprietary + Confidential
Cloud Operations Sandbox
https://cloud-ops-sandbox.dev/
● SRE プラクティスを学び、 Cloud
Operations を適用
できるようにするための OSS
● Cloud Monitoring / Logging
だけでなく、Trace など
他サービスも確認可能
● 必要なくなれば、
プロジェクトごと削除

26. Proprietary + Confidential
● システムにおいて最も重要な機能は 信頼性
● DevOps の実装が SRE
● SRE を実践する上で、信頼性を SLO というかたちで定量化 することは重要
● Cloud Operations の SLO Monitoring 機能 を使って、信頼性を定量化し、 SRE を実践しよう
まとめ

27. Proprietary + Confidential
Thank you.