SlideShare uma empresa Scribd logo
1 de 13
Baixar para ler offline
Кластерные системы
хранения. Решение SoFS
                                   Алексей Федосеев
                         Центр компетенции Linux. IBM
                          alexey_fedoseev@ru.ibm.com
Классические решения NAS
                          Производство




               Классическое
                 решение
Разработка
             с островами NAS


                               Бухгалтерия



               Продажи
Проблемы NAS
    Объем «неструктурированных данных» превосходит объем баз
•
    данных предприятия, в то время как:
    – Современные решения NAS плохо масштабируются
      горизонтально
    – Закончилось место? Добавляется еще одна система
      хранения
    – Нет единой системы администрирования
    Актуальным становится одновременный доступ к данным из
•
    разных приложений и ОС
    Миграция, резервное копирование и архивирование тем
•
    сложнее, чем больше отдельных NAS-систем
Кластерная система хранения
Кластерная система (SoFS)   Классические системы NAS
Сетевые файловые системы




                                  Сетевая ФС
Локальная ФС
                                    Файлы разделяются между приложениями на
  Без совместного доступа,        ●
●

                                   сетевом сервере
 приложения обращаются только к
 локальным файлам                   Связь обеспечивается через локальную сеть
                                  ●


  Разделение данных в рамках        Сервер ограничивает пропускную способность
●                                 ●


 работы приложений                 и снижает надежность системы
Распределенная файловая система GPFS

ФС параллельного доступа (напр., IBM GPFS)

  В GPFS файлы разделены между множеством дисков
●


на множестве узлов хранения
  Независимые экземпляры GPFS запущены на узлах
●


приложений
  Все экземпляры GPFS имеют доступ ко всем дискам
●
Компоненты SoFS
     GPFS 3.2 – высокопроизводительная
      кластерная файловая система IBM
     CTDB – управление кластером и
      файловыми службами
     Усовершенствованная версия Samba для
      экспорта данных по протоколам CIFS
     RHEL5.1 – базовая ОС, обеспечивающая
      сервисы NFS, FTP и HTTP
     Пакеты SoFS – обеспечивают
      административный интерфейс, модули
      для HTTP, средства ускорения доступа и
      прочее
     Аппаратное обеспечение IBM
Жизненный цикл данных
                                             SoFS
      Классические NAS




                                      $    $        $   $
•   Индивидуальное
    управление емкостью
•   Средняя утилизация <50%   •   Централизованное управление
•   К 80% нет обращений за    •   Средняя утилизация >80%
    последние 6 месяцев
                              •   Создание политики миграции
Репликация данных в SoFS
                      Отдел А




    SoFS



           Интернет




   SoFS

                      Отдел Б
Аппаратная конфигурация SoFS
                                                Client
                                                                            Dedicated
                                                                                           Кластерные узлы:
                                               network                     networks for
                                                                            GPFS and
                                                                            CTDB/mgt
      4x2x10Gb

                                                                                            – Лезвия IBM BladeCenter
       = 80Gb

                                          10GbE Uplink SwMd   Ethernet Switch Module

                                                                                            – Серверы IBM System x
                                                          Midplane
  4x1Gb I/O+
 1Gb GPFS +

                                                                                           Системы хранения:
1Gb CTDB / Mgt
                  BladeCenter H Chassis




                                                                                   AMM2
                                          HS21 Blade (Mgt)
                                                                                            – Все системы DS от IBM System Storage
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade
                                            HS21 Blade


                                                                                            – Диски, ленты
                                                                                   AMM2



                                                                                           Коммуникационное оборудование:
      2x4Gb
      = 8Gb
                                                          Midplane

                                                                                            – 1GbE, 10GbE, Fibre Channel, Infiniband
                                          FC Switch Module    FC Switch Module
        2x6x4Gb
         = 48Gb



                                                         Storage
Интерфейс администрирования SoFS
Управление надежностью системы
                                        Управление узлами системы




                                 Отчеты по использованию кластера
Управление файловыми службами
Сервисная составляющая SoFS

Сервисы в решении SoFS

 Консультации
 Архитектура решения
 Установка и настройка
 SoFS – базовая поддержка
 SoFS – премиум поддержка
Спасибо за внимание
     Вопросы?


      Алексей Федосеев
Центр компетенции Linux, IBM EE/A
   alexey_fedoseev@ru.ibm.com

Mais conteúdo relacionado

Mais procurados

исчезнут ли российские эпс
исчезнут ли российские эпсисчезнут ли российские эпс
исчезнут ли российские эпсTimur AITOV
 
Установки по приготовлению антисептиков и других дезинфекторов
Установки по приготовлению антисептиков и других дезинфекторовУстановки по приготовлению антисептиков и других дезинфекторов
Установки по приготовлению антисептиков и других дезинфекторовGlobeCore
 
lekcia
lekcialekcia
lekciaokovru
 
колышкин Rootconf 2009 Openvz
колышкин Rootconf 2009 Openvzколышкин Rootconf 2009 Openvz
колышкин Rootconf 2009 OpenvzLiudmila Li
 
ObjectXPathNavigator - Как и зачем?
ObjectXPathNavigator - Как и зачем?ObjectXPathNavigator - Как и зачем?
ObjectXPathNavigator - Как и зачем?SQALab
 
классификация вредоносного по
классификация вредоносного поклассификация вредоносного по
классификация вредоносного поanna.korovko
 
ObjectXPathNavigator - как и зачем?
ObjectXPathNavigator - как и зачем?ObjectXPathNavigator - как и зачем?
ObjectXPathNavigator - как и зачем?Andrew Mayorov
 
Mediabarcamp2009: Редагування в нових медіа
Mediabarcamp2009: Редагування в нових медіаMediabarcamp2009: Редагування в нових медіа
Mediabarcamp2009: Редагування в нових медіаAndrew Dutchak
 
кеширование в бд
кеширование в бдкеширование в бд
кеширование в бдMax Lapshin
 
советы, которые спасут ваш компьютер
советы, которые спасут ваш компьютерсоветы, которые спасут ваш компьютер
советы, которые спасут ваш компьютерanna.korovko
 
2008-04-15-scrum-from-custis-show
2008-04-15-scrum-from-custis-show2008-04-15-scrum-from-custis-show
2008-04-15-scrum-from-custis-showStas Fomin
 
Sergey Kh Xs Essentials
Sergey Kh Xs EssentialsSergey Kh Xs Essentials
Sergey Kh Xs EssentialsLiudmila Li
 
Profit Backlog | В погоне за эффективным бэклогом
Profit Backlog | В погоне за эффективным бэклогомProfit Backlog | В погоне за эффективным бэклогом
Profit Backlog | В погоне за эффективным бэклогомNikita Filippov
 
Разработка сайта: особенности регионального ценообразования
Разработка сайта: особенности регионального ценообразованияРазработка сайта: особенности регионального ценообразования
Разработка сайта: особенности регионального ценообразования"Rating Runet"
 
Learning environments and learning objects
Learning environments and learning objectsLearning environments and learning objects
Learning environments and learning objectsHans Põldoja
 

Mais procurados (19)

Xen virtualization
Xen virtualizationXen virtualization
Xen virtualization
 
исчезнут ли российские эпс
исчезнут ли российские эпсисчезнут ли российские эпс
исчезнут ли российские эпс
 
Установки по приготовлению антисептиков и других дезинфекторов
Установки по приготовлению антисептиков и других дезинфекторовУстановки по приготовлению антисептиков и других дезинфекторов
Установки по приготовлению антисептиков и других дезинфекторов
 
lekcia
lekcialekcia
lekcia
 
колышкин Rootconf 2009 Openvz
колышкин Rootconf 2009 Openvzколышкин Rootconf 2009 Openvz
колышкин Rootconf 2009 Openvz
 
10 Xs Dg
10 Xs Dg10 Xs Dg
10 Xs Dg
 
ObjectXPathNavigator - Как и зачем?
ObjectXPathNavigator - Как и зачем?ObjectXPathNavigator - Как и зачем?
ObjectXPathNavigator - Как и зачем?
 
классификация вредоносного по
классификация вредоносного поклассификация вредоносного по
классификация вредоносного по
 
ObjectXPathNavigator - как и зачем?
ObjectXPathNavigator - как и зачем?ObjectXPathNavigator - как и зачем?
ObjectXPathNavigator - как и зачем?
 
Mediabarcamp2009: Редагування в нових медіа
Mediabarcamp2009: Редагування в нових медіаMediabarcamp2009: Редагування в нових медіа
Mediabarcamp2009: Редагування в нових медіа
 
кеширование в бд
кеширование в бдкеширование в бд
кеширование в бд
 
Git
GitGit
Git
 
советы, которые спасут ваш компьютер
советы, которые спасут ваш компьютерсоветы, которые спасут ваш компьютер
советы, которые спасут ваш компьютер
 
video hostings architecture
video hostings architecturevideo hostings architecture
video hostings architecture
 
2008-04-15-scrum-from-custis-show
2008-04-15-scrum-from-custis-show2008-04-15-scrum-from-custis-show
2008-04-15-scrum-from-custis-show
 
Sergey Kh Xs Essentials
Sergey Kh Xs EssentialsSergey Kh Xs Essentials
Sergey Kh Xs Essentials
 
Profit Backlog | В погоне за эффективным бэклогом
Profit Backlog | В погоне за эффективным бэклогомProfit Backlog | В погоне за эффективным бэклогом
Profit Backlog | В погоне за эффективным бэклогом
 
Разработка сайта: особенности регионального ценообразования
Разработка сайта: особенности регионального ценообразованияРазработка сайта: особенности регионального ценообразования
Разработка сайта: особенности регионального ценообразования
 
Learning environments and learning objects
Learning environments and learning objectsLearning environments and learning objects
Learning environments and learning objects
 

Destaque

Cisco ASA CX - новый прикладной МСЭ
Cisco ASA CX - новый прикладной МСЭCisco ASA CX - новый прикладной МСЭ
Cisco ASA CX - новый прикладной МСЭCisco Russia
 
Технологии Интел по обеспечению безопасности корпоративных пользователей.
 Технологии Интел по обеспечению безопасности корпоративных пользователей. Технологии Интел по обеспечению безопасности корпоративных пользователей.
Технологии Интел по обеспечению безопасности корпоративных пользователей.Cisco Russia
 
NeoQUEST: Tpm.txt.на что способно заморское железо
NeoQUEST: Tpm.txt.на что способно заморское железоNeoQUEST: Tpm.txt.на что способно заморское железо
NeoQUEST: Tpm.txt.на что способно заморское железоNeo_QUEST
 
Cisco Web Security - обзор технологии и функционала
Cisco Web Security - обзор технологии и функционалаCisco Web Security - обзор технологии и функционала
Cisco Web Security - обзор технологии и функционалаCisco Russia
 
Security cores 1.10.13
Security cores   1.10.13Security cores   1.10.13
Security cores 1.10.13Boris Kizko
 
Новые вызовы кибербезопасности
Новые вызовы кибербезопасностиНовые вызовы кибербезопасности
Новые вызовы кибербезопасностиCisco Russia
 
Создание и управление кластерами
Создание и управление кластерамиСоздание и управление кластерами
Создание и управление кластерамиAleksandr Dvoeglazov
 
ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...
ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...
ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...Alexey Paznikov
 
Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)
Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)
Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)SkillFactory
 
Trusted Platform Module (TPM)
Trusted Platform Module (TPM)Trusted Platform Module (TPM)
Trusted Platform Module (TPM)k33a
 
Presentation on Total Productive Maintenance
Presentation on Total Productive MaintenancePresentation on Total Productive Maintenance
Presentation on Total Productive MaintenanceMahendra K SHUKLA
 

Destaque (13)

Cisco ASA CX - новый прикладной МСЭ
Cisco ASA CX - новый прикладной МСЭCisco ASA CX - новый прикладной МСЭ
Cisco ASA CX - новый прикладной МСЭ
 
Технологии Интел по обеспечению безопасности корпоративных пользователей.
 Технологии Интел по обеспечению безопасности корпоративных пользователей. Технологии Интел по обеспечению безопасности корпоративных пользователей.
Технологии Интел по обеспечению безопасности корпоративных пользователей.
 
NeoQUEST: Tpm.txt.на что способно заморское железо
NeoQUEST: Tpm.txt.на что способно заморское железоNeoQUEST: Tpm.txt.на что способно заморское железо
NeoQUEST: Tpm.txt.на что способно заморское железо
 
20 intel
20 intel20 intel
20 intel
 
Cisco Web Security - обзор технологии и функционала
Cisco Web Security - обзор технологии и функционалаCisco Web Security - обзор технологии и функционала
Cisco Web Security - обзор технологии и функционала
 
Security cores 1.10.13
Security cores   1.10.13Security cores   1.10.13
Security cores 1.10.13
 
Новые вызовы кибербезопасности
Новые вызовы кибербезопасностиНовые вызовы кибербезопасности
Новые вызовы кибербезопасности
 
Создание и управление кластерами
Создание и управление кластерамиСоздание и управление кластерами
Создание и управление кластерами
 
ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...
ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...
ПВТ - весна 2015 - Лекция 1. Актуальность параллельных вычислений. Анализ пар...
 
Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)
Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)
Как защитить сеть от web-угроз с помощью Cisco WSA (ex IronPort)
 
Trusted Platform Module (TPM)
Trusted Platform Module (TPM)Trusted Platform Module (TPM)
Trusted Platform Module (TPM)
 
Presentation on Total Productive Maintenance
Presentation on Total Productive MaintenancePresentation on Total Productive Maintenance
Presentation on Total Productive Maintenance
 
Trusted Computing Base
Trusted Computing BaseTrusted Computing Base
Trusted Computing Base
 

Mais de Liudmila Li

11 Ban Net Scaler Xa
11 Ban Net Scaler Xa11 Ban Net Scaler Xa
11 Ban Net Scaler XaLiudmila Li
 
09 Ban Branch Repeater1
09 Ban Branch Repeater109 Ban Branch Repeater1
09 Ban Branch Repeater1Liudmila Li
 
07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)
07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)
07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)Liudmila Li
 
04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey Kh
04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey Kh04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey Kh
04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey KhLiudmila Li
 
05 чэс описание решения V3
05  чэс описание решения V305  чэс описание решения V3
05 чэс описание решения V3Liudmila Li
 
01 Ap еKaterinburg
01 Ap еKaterinburg01 Ap еKaterinburg
01 Ap еKaterinburgLiudmila Li
 
11 Net Scaler Xa1
11 Net Scaler Xa111 Net Scaler Xa1
11 Net Scaler Xa1Liudmila Li
 
09 Branch Repeater1
09 Branch Repeater109 Branch Repeater1
09 Branch Repeater1Liudmila Li
 
06 03 Gazprombank Success Story
06 03 Gazprombank Success Story06 03 Gazprombank Success Story
06 03 Gazprombank Success StoryLiudmila Li
 
06 02 C I S Citrix Final
06 02 C I S Citrix Final06 02 C I S Citrix Final
06 02 C I S Citrix FinalLiudmila Li
 
06 01 сертифицированные продукты
06 01 сертифицированные продукты06 01 сертифицированные продукты
06 01 сертифицированные продуктыLiudmila Li
 
05 Bykov Citrix Last
05 Bykov Citrix Last05 Bykov Citrix Last
05 Bykov Citrix LastLiudmila Li
 
04 Xa5 Fp1 Sergey Kh
04 Xa5 Fp1 Sergey Kh04 Xa5 Fp1 Sergey Kh
04 Xa5 Fp1 Sergey KhLiudmila Li
 

Mais de Liudmila Li (20)

11 Ban Net Scaler Xa
11 Ban Net Scaler Xa11 Ban Net Scaler Xa
11 Ban Net Scaler Xa
 
10 Dg Xd
10 Dg Xd10 Dg Xd
10 Dg Xd
 
09 Ban Branch Repeater1
09 Ban Branch Repeater109 Ban Branch Repeater1
09 Ban Branch Repeater1
 
08 Xenserver Dg
08 Xenserver Dg08 Xenserver Dg
08 Xenserver Dg
 
07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)
07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)
07 Ibm System X And Blade Center For Citrix Forum(Ekatirenburg)
 
04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey Kh
04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey Kh04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey Kh
04 Cvc2009 Yekaterinburg Xa5 Fp1 Sergey Kh
 
06 [хост]
06 [хост]06 [хост]
06 [хост]
 
05 чэс описание решения V3
05  чэс описание решения V305  чэс описание решения V3
05 чэс описание решения V3
 
03 Bcc суэк
03 Bcc суэк03 Bcc суэк
03 Bcc суэк
 
01 Ap еKaterinburg
01 Ap еKaterinburg01 Ap еKaterinburg
01 Ap еKaterinburg
 
11 Net Scaler Xa1
11 Net Scaler Xa111 Net Scaler Xa1
11 Net Scaler Xa1
 
09 Branch Repeater1
09 Branch Repeater109 Branch Repeater1
09 Branch Repeater1
 
08 Dg Xd
08 Dg Xd08 Dg Xd
08 Dg Xd
 
07 Ws08 R2 Virt
07 Ws08 R2 Virt07 Ws08 R2 Virt
07 Ws08 R2 Virt
 
06 03 Gazprombank Success Story
06 03 Gazprombank Success Story06 03 Gazprombank Success Story
06 03 Gazprombank Success Story
 
06 02 C I S Citrix Final
06 02 C I S Citrix Final06 02 C I S Citrix Final
06 02 C I S Citrix Final
 
06 01 сертифицированные продукты
06 01 сертифицированные продукты06 01 сертифицированные продукты
06 01 сертифицированные продукты
 
05 Bykov Citrix Last
05 Bykov Citrix Last05 Bykov Citrix Last
05 Bykov Citrix Last
 
04 Xa5 Fp1 Sergey Kh
04 Xa5 Fp1 Sergey Kh04 Xa5 Fp1 Sergey Kh
04 Xa5 Fp1 Sergey Kh
 
03 Bcc снг
03 Bcc снг03 Bcc снг
03 Bcc снг
 

Fedoseev Sofs

  • 1. Кластерные системы хранения. Решение SoFS Алексей Федосеев Центр компетенции Linux. IBM alexey_fedoseev@ru.ibm.com
  • 2. Классические решения NAS Производство Классическое решение Разработка с островами NAS Бухгалтерия Продажи
  • 3. Проблемы NAS Объем «неструктурированных данных» превосходит объем баз • данных предприятия, в то время как: – Современные решения NAS плохо масштабируются горизонтально – Закончилось место? Добавляется еще одна система хранения – Нет единой системы администрирования Актуальным становится одновременный доступ к данным из • разных приложений и ОС Миграция, резервное копирование и архивирование тем • сложнее, чем больше отдельных NAS-систем
  • 4. Кластерная система хранения Кластерная система (SoFS) Классические системы NAS
  • 5. Сетевые файловые системы Сетевая ФС Локальная ФС Файлы разделяются между приложениями на Без совместного доступа, ● ● сетевом сервере приложения обращаются только к локальным файлам Связь обеспечивается через локальную сеть ● Разделение данных в рамках Сервер ограничивает пропускную способность ● ● работы приложений и снижает надежность системы
  • 6. Распределенная файловая система GPFS ФС параллельного доступа (напр., IBM GPFS) В GPFS файлы разделены между множеством дисков ● на множестве узлов хранения Независимые экземпляры GPFS запущены на узлах ● приложений Все экземпляры GPFS имеют доступ ко всем дискам ●
  • 7. Компоненты SoFS  GPFS 3.2 – высокопроизводительная кластерная файловая система IBM  CTDB – управление кластером и файловыми службами  Усовершенствованная версия Samba для экспорта данных по протоколам CIFS  RHEL5.1 – базовая ОС, обеспечивающая сервисы NFS, FTP и HTTP  Пакеты SoFS – обеспечивают административный интерфейс, модули для HTTP, средства ускорения доступа и прочее  Аппаратное обеспечение IBM
  • 8. Жизненный цикл данных SoFS Классические NAS $ $ $ $ • Индивидуальное управление емкостью • Средняя утилизация <50% • Централизованное управление • К 80% нет обращений за • Средняя утилизация >80% последние 6 месяцев • Создание политики миграции
  • 9. Репликация данных в SoFS Отдел А SoFS Интернет SoFS Отдел Б
  • 10. Аппаратная конфигурация SoFS Client Dedicated  Кластерные узлы: network networks for GPFS and CTDB/mgt 4x2x10Gb – Лезвия IBM BladeCenter = 80Gb 10GbE Uplink SwMd Ethernet Switch Module – Серверы IBM System x Midplane 4x1Gb I/O+ 1Gb GPFS +  Системы хранения: 1Gb CTDB / Mgt BladeCenter H Chassis AMM2 HS21 Blade (Mgt) – Все системы DS от IBM System Storage HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade HS21 Blade – Диски, ленты AMM2  Коммуникационное оборудование: 2x4Gb = 8Gb Midplane – 1GbE, 10GbE, Fibre Channel, Infiniband FC Switch Module FC Switch Module 2x6x4Gb = 48Gb Storage
  • 11. Интерфейс администрирования SoFS Управление надежностью системы Управление узлами системы Отчеты по использованию кластера Управление файловыми службами
  • 12. Сервисная составляющая SoFS Сервисы в решении SoFS  Консультации  Архитектура решения  Установка и настройка  SoFS – базовая поддержка  SoFS – премиум поддержка
  • 13. Спасибо за внимание Вопросы? Алексей Федосеев Центр компетенции Linux, IBM EE/A alexey_fedoseev@ru.ibm.com