1. 株式会社サイバーエージェント
1
自作サーバ運用
アメーバピグ編
〜それからどうなった〜
株式会社サイバーエージェント 桑野 章弘
14年3月7日金曜日

2. 株式会社サイバーエージェント
自己紹介
14年3月7日金曜日
2

3. 株式会社サイバーエージェント
自己紹介
n桑野 章弘
n株式会社サイバーエージェント
nサーバサイドエンジニア
自社サービスのサーバ設計・構築・運用など
n好きな食べ物
カレー（社内報に記事書いた）
14年3月7日金曜日
3

4. 株式会社サイバーエージェント
自作サーバ、、、
14年3月7日金曜日
4

5. 株式会社サイバーエージェント
3回お酒飲めるくらい喋れる
14年3月7日金曜日
5

6. 株式会社サイバーエージェント
あ、7分しかないので
さっさとやります。
14年3月7日金曜日
6

7. 株式会社サイバーエージェント
出来る限りあの頃の
テイストで。
14年3月7日金曜日
7

8. 株式会社サイバーエージェント
アジェンダ
n自作サーバの導入状況
nアメーバピグについて
nサーバについて
nメリット・デメリット
nまとめ
14年3月7日金曜日
8

9. 株式会社サイバーエージェント
自作サーバの導入状況
14年3月7日金曜日
9

10. 株式会社サイバーエージェント
の前に、、、導入の目的
nコストダウン
nDCの使用効率の向上（消費電力の削減、ラック集積度向
上）
nHW情報収集
14年3月7日金曜日
10

11. 株式会社サイバーエージェント
アメーバピグについて
14年3月7日金曜日
11

12. 株式会社サイバーエージェント
アメーバピグとは
nAmebaで提供しているアバターサービス
n2009年2月 オープン。今年で5周年。
n2011年11月には ユーザ数1,000万人突破
14年3月7日金曜日
12

13. 株式会社サイバーエージェント
14年3月7日金曜日
13

14. 株式会社サイバーエージェント
14年3月7日金曜日
14

15. 株式会社サイバーエージェント
自作サーバについて
14年3月7日金曜日
15

16. 株式会社サイバーエージェント
サーバについて
nサーバ仕様
nサーバスペック
14年3月7日金曜日
16

17. 株式会社サイバーエージェント
17
サーバ仕様
nラッキング
16台1組（6U）
14年3月7日金曜日
サーバ8台を前後から
縦置き
合計16台を1セット

18. 株式会社サイバーエージェント
サーバ仕様
nラッキング
1ラック最大96台（16台 * 6セット）搭載可能
もちろん消費電力の兼ね合いがあります
14年3月7日金曜日
18

19. 株式会社サイバーエージェント
サーバスペック
n Core2Quadモデル
Web、APサーバ等のロードバランサ等で負荷分散される用途
n Atomモデル
CPUを使わない用途：主にキャッシュサーバ用途
14年3月7日金曜日
19

20. 株式会社サイバーエージェント
20
アメーバピグでの使い分け例
nAtomモデル
分散KVS
分散KeyValueマスタ
定期的にデータを再分
配する
ベンダーサーバ
MySQL
MySQL
14年3月7日金曜日
分散KeyValueノード
自作サーバ
マスタデータの入って
いるDB
ベンダーサーバ
MySQL

21. 株式会社サイバーエージェント
アメーバピグでの使い分け例
nAtomモデル
分散KVS
✕
14年3月7日金曜日
✕
MySQL
MySQL
MySQL
アメーバピグのバック
エンドは
MySQL(+ioDrive)
のみに。
21

22. 株式会社サイバーエージェント
自作サーバの種類と台数
nストレージサーバ
低コストで安定したストレージサーバ
n高密度サーバ
スケールアウト前提のサーバ
AtomモデルとCore2Quadモデルを用途毎に使い分け
14年3月7日金曜日
22

23. 株式会社サイバーエージェント
自作サーバの例[ストレージサーバ]
14年3月7日金曜日
23

24. 無いです
14年3月7日金曜日

25. 株式会社サイバーエージェント
自作サーバの例[高密度サーバ]
14年3月7日金曜日
25

26. 株式会社サイバーエージェント
自作サーバの例[高密度サーバ]
14年3月7日金曜日
26

27. だから
無いです
14年3月7日金曜日

28. 株式会社サイバーエージェント
自作サーバ台数
n0台前後
2014/2現在
->と、言うわけなので、今回は何故自作サーバは減っていった
のかを。
14年3月7日金曜日
28

29. 株式会社サイバーエージェント
メリット・デメリット
14年3月7日金曜日
29

30. 株式会社サイバーエージェント
メリット・デメリット
が、どうかわったのよ？
14年3月7日金曜日
30

31. 株式会社サイバーエージェント
メリット・デメリット
nコストパフォーマンス
n電源容量
n安定性
n機材の確保
nハードウェアのノウハウ
14年3月7日金曜日
31

32. 株式会社サイバーエージェント
メリット・デメリット
nコストパフォーマンス
徐々に価格比性能面でメリットが出なくなってきた。
-自作サーバ>>>1UのIAサーバ から、
-1UのIAサーバ>>自作サーバ くらいに。
CPUの差
メモリの差
14年3月7日金曜日
32

33. 株式会社サイバーエージェント
メリット・デメリット
n消費電力
これに関しては今でも多少メリットあると思うが、最近の1UのIAサーバ
はかなり省電力なので、性能比で考えるとかなりメリットが減衰している
14年3月7日金曜日
33

34. 株式会社サイバーエージェント
メリット・デメリット
n安定性
言うほど悪くな”かった”
稼働3年過ぎたくらいから故障率が上がってきた
HW障害に対する人的コストが高い。
-体制改善の余地はあったかも、とは思っている
14年3月7日金曜日
34

35. 株式会社サイバーエージェント
メリット・デメリット
n機材の確保
コンシューマユースの機材を集め続けるのは至難の業
価格のメリット出づらくなる
在庫管理大変
14年3月7日金曜日
35

36. 株式会社サイバーエージェント
メリット・デメリット
nハードウェアのノウハウ
全自作というサーバはほぼ亡くなったが、HWの一部変更など行った
り、物品購入するパスは自作サーバをやった事で構築できた所がある
-サーバの一部SSDにしましょ
-メモリ交換しましょ
-DAS自作
-SAS Expander
14年3月7日金曜日
36

37. 株式会社サイバーエージェント
ともかく、と言う訳で
14年3月7日金曜日
37

38. 株式会社サイバーエージェント
2013年07月30日(火)
14年3月7日金曜日
38

39. 株式会社サイバーエージェント
14年3月7日金曜日
39

40. 株式会社サイバーエージェント
黙祷
14年3月7日金曜日
40

41. 株式会社サイバーエージェント
そして
14年3月7日金曜日
41

42. 株式会社サイバーエージェント
売られる
14年3月7日金曜日
42

43. 株式会社サイバーエージェント
まとめ
14年3月7日金曜日
43

44. 株式会社サイバーエージェント
44
まとめ
n自作サーバは2008〜2009年のタイミングが神とも言えるタ
イミングだったと今でも思っていて、あの時にやれて本当に嬉し
い。
nメリットとしてあげられるものが少なくなってしまった
n自作サーバを運用したことは、ハードウェアのノウハウや、DC
運用のノウハウとして非常に良い経験だった。
nただNUCとか面白そうですよね
14年3月7日金曜日

45. 株式会社サイバーエージェント
まとめ
n自作サーバは売られる（まさかそのままとは）
nデータ削除はしっかりと！（してましたよ！）
nテプラは剥がすよね？とか聞きましょう(:.;ﾟ;Д;ﾟ;.:)ﾊｧﾊｧ
14年3月7日金曜日
45

46. 株式会社サイバーエージェント
ご清聴ありがとうございました。
14年3月7日金曜日
46