1. Amazon Elastic Computing Clouds
в действии
Тупицын Дмитрий
dt@nevesomo.com

2. Структура
Ⅰ Что такое и зачем нужен EC2?
Ⅱ Первые шаги
Ⅲ Масштабируемый веб-сервер
Ⅳ Создание образов
Ⅴ Адресация
Ⅵ Безопасность

3. Часть Ⅰ
Что такое и зачем нужен
EC2?

4. Что такое EC2?
• Сервера по требованию
• Аренда через программные API или веб-браузер
• 1-3 минуты и сервер готов
• Предустановленные ОС
• Linux, OpenSolaris, Windows
• Возможность кастомизации
• Оплата после использования
• Метафора “pay by the drink”

5. Типы серверов/инстанций

6. Типы серверов/инстанций
Type Mem HDD Platf I/O CPU unit
Small 1.7 160 i386 Moderate 1
Large 7.5 850 x64 High 4
Extra Large 15 1690 x64 High 8
High CPU Medium 1.7 350 i386 Moderate 5
High CPU Extra Large 7 1690 x64 High 20

7. Зачем нужен EC2?
• Масштабируемые сервисы
• Непредсказуемая загрузка: запуск нового сервиса, наплыв
пользователей во время PR-акций
• Сезонные или суточные изменения
• Периодические задачи
• Подсчет “сложной” статистики по БД, компиляция большого
проекта, резервное копирование
• Срочно нужен сервер

8. Масштабируемые сервисы
Неизвестно количество пользователей
Периодическая загрузка

9. Периодические задачи
Пример: who.hasfiles.com
Цель: минимизация трафика во время бэкапа

10. Срочно нужен сервер
Задача: провести эксперимент/вычисления

11. Часть Ⅱ
Первые шаги

12. Регистрация
• http://aws.amazon.com
• Потребуется
• Email
• Кредитная карта
• Получим
• Access Key (строка)
• Secret Access Key (строка)
• Account Number (или User ID – тоже строка)
• Certificate X.509 (файл в 1 Кб)
• Privat Key (файл в 1 Кб)

13. Установка ec2-api-tools
• Загружаем ec2-api-tools
• http://s3.amazonaws.com/ec2-downloads/ec2-api-tools.zip
• Распаковываем
• В директорию ~/.ec2/ec2-api-tools
• Копируем сертификат и ключ
• Сертификат в ~/.ec2/cert-ec2.pem
• Ключ в ~/.ec2/pk-ec2.pem

14. Настройка окружения
• Настройка java (JAVA_HOME и т.п.)
• Устанавливаем
export EC2_HOME=~/.ec2/ec2-api-tools
export EC2_PRIVATE_KEY=~/.ec2/pk-ec2.pem
export EC2_CERT=~/.ec2/cert-ec2.pem
export EC2_ACCESS_KEY=XXXXXXXXXXXXXXX
export EC2_SECRET_KEY=XXXXXXXXXXXXXXXXXXXXXXXXX
export PATH=$PATH:~/.ec2/ec2-api-tools/bin
export USER_ID=XXXXXXX # не обязательно

15. Выбор образа
$ ec2-describe-images -a | grep debian-5 | grep i386
IMAGE ami-67fe190e alestic/debian-5.0-lenny-
base-20090215.manifest.xml 063491364108 available
public i386 machine aki-a71cf9ceari-a51cf9cc

16. Генерация SSH ключа
$ ec2-add-keypair keypair > ~/.ec2/keypair
# убрать первую строку из ~/.ec2/keypair
$ chmod 700 ~/.ec2/keypair

17. Запуск образа
$ ec2-run-instances ami-67fe190e -k keypair
$ ec2-describe-instances #посмотреть что запущенно

18. Комманды запуска образа
$ ec2-run-instances ami-67fe190e -k keypair
$ ec2-describe-instances
# ждем 1-3 минуты до появления статуса running
# видим dns имя и ip
$ ec2-describe-instances
INSTANCE i-55274a3c ami-67fe190e
ec2-174-129-118-242.compute-1.amazonaws.com
ip-10-250-6-8.ec2.internal running keypair 0 m1.small
2009-04-08T14:52:23+0000 us-east-1b aki-a71cf9ce
ari-a51cf9cc

19. Сервер запущен!
$ ssh -i ~/.ec2/keypair
root@ec2-174-129-118-242.compute-1.amazonaws.com

20. Что на сервере?
$ df -h
Filesystem Size Used Avail Use% Mounted on
/dev/sda1 9.9G 506M 8.9G 6% /
tmpfs 854M 0 854M 0% /lib/init/rw
udev 854M 24K 854M 1% /dev
tmpfs 854M 0 854M 0% /dev/shm
/dev/sda2 147G 188M 140G 1% /mnt
В / монтируется образ
/mnt – исчезнет после остановки сервера!!!

21. Часть Ⅲ
Масштабируемый веб-сервер

22. Структура веб-сервера
Сколько пользователей?
Сколько потребуется front-end серверов?

23. Условия и допущения
• Условие: быстрое масштабирование
• front-end серверов от 1 до 5
• Добавление или останов front-end серверов за 5 минут
• Допущение:
• Один back-end сервер
• БД без репликаций
• Один back-end справится с 5-ю front-end серверами
• Можно разрывать сессии на front-end

24. Часть Ⅳ
Создание образов

25. back-end и front-end образы
Для разных типов серверов - разные
образы
• front-end = apache + python + ...
• back-end = mysql + ...

26. Команды создания образа
Выполняем на ec2 сервере:
$ apt-get install apache2 libapache2-mod-python python-mysqldb
# и т.д.
$ ec2-bundle-vol -d /mnt/ -k pk-ec2.pem -c cert-ec2.pem -u
quot;$EC2_USERquot; -r i386 -p front-end
$ ec2-upload-bundle -b mybucket
-m /mnt/front-end.manifest.xml
-a quot;$EC2_ACCESS_KEYquot; -s quot;$EC2_SECRET_KEYquot;

27. Регистрация образа
$ ec2-register mybucket/front-end.manifest.xml
IMAGE ami-5a779e1f
$ export FRONT_END_AIM=ami-5a779e1f

28. Часть Ⅴ
Адресация

29. Внешние и внутренние ip

30. Внешние и внутренние ip
Трафик по внешнему ip платный
Даже между инстанциям в облаке!!
• 0.01$ / Gb
$ ec2-describe-instances
INSTANCE i-55274a3c ami-67fe190e
ec2-174-129-118-242.compute-1.amazonaws.com
ip-10-250-6-8.ec2.internal running keypair 0 m1.small ......

31. Elastic IP Addresses
Аренда внешних IP адресов
Изменение дианмических IP на
заранее известные
$ ec2-allocate-address # получить ip
ADDRESS 114.129.212.37
$ export EC2_IP=114.129.212.37
$ ec2-associate-address -i i-cd5c34a4 $EC2_IP #установить
ADDRESS 114.129.212.37 i-cd5c34a4

32. Часть Ⅵ
Безопасность

33. Проблема 1
Сложно настраивать firewall заранее не зная всех ip адресов

34. Проблема 2
Настройки безопасности различны для разных серверов

35. Группы серверов
Разделяем сервера на группы безопасности

36. Права для групп
Открываем порты для групп

37. Управление группами
Права:
• front-end — 80 порт доступен для всех
• back-end — полный доступ с front-end серверов
$ ec2-add-group front-end --description 'web servers'
$ ec2-authorize front-end -p 80
$ ec2-add-group back-end --description 'db servers'
$ ec2-authorize back-end
--source-group front-end -u $EC2_USER

38. ssh доступ
• Временный доступ
• Только для заданого ip
# открываем доступ для 89.12.9.94
$ ec2-authorize front-end -p 22 --source-subnet 89.12.9.94/32
# закрываем
$ ec2-revoke front-end -p 22 --source-subnet 89.12.9.94/32

39. Запуск сервера в группе
• Группа указывается при запуске
• Сервер не может сменить группу
• Настройки группы можно менять в
любое время
$ ec2-run-instance $BACK_END_AIM -k keypair -g back-end
$ ec2-run-instance $FRONT_END_AIM -k keypair -g front-end

40. Часть Ⅵ с половиной
Презент!

41. AWS Management Console
Все вышеперечисленное можно
сделать через веб интерфейс
http://console.aws.amazon.com/
Автоматизировать — только через
программные API

42. Спасибо!
Вопросы?
dt@nevesomo.com