JAWS-UG Serverless祭り

1. Serverlessしてますか？
〜アプリケーションとバッチ処理のServerless化〜
株式会社KYOSO 泉 亮輔
2018/10/26 JAWS-UG 京都 - 秋のコンテナ・Serverless祭り

2. 2
自己紹介
名前 = 泉 亮輔
会社 = 株式会社KYOSO
お仕事 = IoT.kyoto (https://iot.kyoto)
AWS歴 = 約2.5年
好きなAWSのサービス = Lambda, DynamoDB

3. 3
名前 = 西田侑平
会社 = 株式会社KYOSO
お仕事 = IoT.kyoto(https://iot.kyoto)
好きなAWSのサービス = ECS, AWSBatch
自己紹介

4. 4
会社紹介
株式会社KYOSO
設立 1973年
資本金 3.7億円
従業員 500名
事業所 京都・大阪・東京・名古屋
ITサービス イロイロご提供
• デジタルトランスフォーメーション
• インフラ構築・保守
• データセンター運用
• サービスデスク
• アプリ開発・保守

5. 5

6. 6
IoTスターターパック
イニシャル ¥120,000〜
オプションをチョイスする
セミカスタムメイド方式

7. 7
FlashAirでIoT
イニシャル ¥120,000〜
オプションをチョイスする
セミカスタムメイド方式

8. 8
公開事例多数！

9. 9
日刊工業新聞の一面に！
引用：日刊工業新聞10/26

10. 10
Serverlessやってるよ！
って方は挙手！

11. 11
Serverlessとは？
(AWSでの話をすると)
AWSLambdaやAPIGatewayなどのマネージド
サービスを組み合わせて、EC2といったサー
バーを立てることなく、アプリケーションを
構築すること

12. 12
Serverlessとは？
勘違いしてはいけないのが…
全くサーバを利用しないのではなく
サーバを利用してる感がない
ということです

13. 13
Serverlessとは？
異論は認める

14. 14
アプリケーションのServerless化

15. 15
主役

16. 16
ちょーザックリ説明すると…
DynamoDBに蓄積したセンサーデータを
可視化するWebアプリケーション
(無料です)

17. 17

18. 18
アーキテクチャ
弊社環境 お客様環境

19. 19
アーキテクチャ
• 複数台のEC2の前段にALBをおいて冗長性を持たせ
るっていう、オーソドックスなアーキテクチャ
• EC2とALBはElasticBeanstalkで構築
• アプリケーションはDockerコンテナで実行
• DynamoDBへはAWSSDK for Node.jsを利用

20. 20
前任者が IoT.kyotoVIS を立ち上げてから
早2年…
ろくにアップデートかけてないからそ
ろそろやっていこうぜ！

21. 21
…ってことで6月頃から着手

22. 22
こうして始まった…
• Node.jsのバージョンアップ
• その他諸々のパッケージのバージョンアップ
• 新機能の追加
• UI / UXの改良
• そもそもEC2いるか？

23. 23
こうして始まった…
• Node.jsのバージョンアップ
• その他諸々のパッケージのバージョンアップ
• 新機能の追加
• UI / UXの改良
• そもそもEC2いるか？ おっ?!?!

24. 24
そもそもEC2いるか？
• コンテンツ(HTML/CSS/JS)をどうするか？
• Node.jsの処理をどうするか？
• 認証をどうするか
• etcetc......
こんな感じでEC2を排除するためのハードルががが……

25. 25
EC2半端ないって……

26. 26
こうすればいいのでは？
• コンテンツはS3で配信
• S3の前段にCloudFrontを挟んでHTTPS対応
• 認証周りはCognito
• Node.jsの処理はLambda
• APIGateway経由でLambdaを呼び出す

27. 27
(省略)

28. 28
すべて乗り越えた…

29. 29
そうしてこうなった
弊社環境 お客様環境

30. 30
そうしてこうなった…

31. 31
Before
弊社環境 お客様環境

32. 32
After
弊社環境 お客様環境

33. 33
アプリをServerless化するメリット
• EC2がなくなった
→サーバの管理から開放された
• コスト削減
→ほとんど料金がかからない

34. 34
アプリをServerless化するデメリット
• APIGatewayが30秒以上持たないので、レスポンスが必要な
ら、その範囲に収めないといけない
• Lambdaを使っているので一度に5分以上かかる処理が発生
する場合は工夫しなければいけない
• Lambdaを利用するのでRDSとの相性が激悪になる
• 上記のように利用するサービスの制限には注意が必要

35. 35
アプリをServerlessにした所感
• 大人しくEC2を立てたほうがいい場合はある
• 不要な処理をごっそり消せたので良かった
• この世に存在する便利なものは使っていこう
ぜっていう思考を手に入れた
• Serverlessに魅了された

36. 36
バッチ処理のServerless化

37. 37
バッチ処理って何？
バッチ処理(バッチしょり)とは、コンピュータで1つの
流れのプログラム群(ジョブ)を順次に実行すること。
あらかじめ定めた処理を一度に行うこと
引用元：wikipedia

38. 38
バッチ処理って何？
バッチ処理(バッチしょり)とは、コンピュータで1つの
流れのプログラム群(ジョブ)を順次に実行すること。
あらかじめ定めた処理を一度に行うこと
引用元：wikipedia
あらかじめ決められた処理を一括に
実行すること

39. 39
みなさん、
バッチ処理好きですか？

40. 40
PDF生成、CSV生成
メール送信、 etc…

41. 41
バッチ処理の仕組み、
構成考えるの楽しいぃぃぃ！！！

42. 42
(このことが災いして、ShellScriptにドハマリし、
「シェル芸」と呼ばれる魔界の地に
足を踏み入れてしまったのはまた別のお話)

43. 43
今回サーバーレス化したバッチ処理は…

44. 44
今回サーバーレス化したバッチ処理は…
生成

45. 45
要望
 週ごとで集計したデータ(JST, UTC, 日本語, 英語)をグラ
フ、テーブル表示したPDFがほしい
 月ごとで集計したデータをグラフ、テーブル表示した
PDFがほしい
 更にそのPDFを月ごと、週ごとでメール送信してくれ
ると嬉しいな😍

46. 46

47. 47
• 既存のWebサービス内にPDFダ
ウンロード機能はあるが、
パフォーマンスチューニング
していた
• チューニングしたアプリ
に対して、お客様からの要求を
アプリ内に組み込んだら
どうなるか…😨

48. 48

49. 49
バッチ化すれば
ええんちゃう？

50. 50
バッチ…？なる…ほど…？
でも、PDF機能はアプリ内に
存在してるし…
その機能作った人いないし…
どうすれば…

51. 51

52. 52
そうか！既存のアプリからPDF作成の
コア部分だけを抽出して、
Dockerコンテナ化すればいいのか！！

53. 53
PDF作成機能のコア部分を(頑張って)
コンテナ化完了
コンテナはECRに置くとして…
どのサービスで呼び出そう…

54. 54
ECS(EC2)
• AWSでコンテナを使うとなると、避けては通れない
サービス
即決しなかった理由
• 極力、EC2のお守りなんてしたくない

55. 55
ECS(Fargate)
• EC2のお守りもAWS側で面倒見てくれる
起動タイプ
即決しなかった理由
• コンテナのリトライ機構を自分で作らないといけない

56. 56
Fargateかなぁ…
• 2018/08/28からタスクスケジュールを
サポートしてるし、いけそう…
• リトライ機構頑張って作るかぁ…

57. 57
AWS Batchってのがあるで

58. 58
少し調べてみると…

59. 59
AWS Batchとは…
• リトライとキューイングの仕組みがある
• 基本料金は無料
(ジョブ実行時に立ち上げるEC2料金のみ)
• 設定次第だが、ジョブが終了したら
EC2を落としてくれる
• 裏ではECSが動いているのでECSの知識があれば
理解しやすい

60. 60
AWS Batchええやん！！

61. 61
結局こうなった

62. 62
まとめ
• 小規模なバッチ処理はLambda、
中規模、大規模なバッチ処理はAWS Batch、
Fargateがおすすめ！
• Dockerについて知っておくとバッチ処理実装の
選択肢が増えますよ！
• ECSについて知っておくと
もっと選択肢が増えますよ！

63. 63
快適なバッチ生活を!

64. 64
結論
Serverless楽しい♫

65. 65
Fin.