Enviar pesquisa
Carregar
Олег Юхно – От статистики до статистики. Эволюция архитектуры системы на примере системы расчета статистики Яндекса
•
0 gostou
•
493 visualizações
Media Gorod
Seguir
Denunciar
Compartilhar
Denunciar
Compartilhar
1 de 19
Baixar agora
Baixar para ler offline
Recomendados
From protein interaction networks to human phenotypes
From protein interaction networks to human phenotypes
biocs
От Статистики до Статистики. Эволюция архитектуры системы на примере системы ...
От Статистики до Статистики. Эволюция архитектуры системы на примере системы ...
yaevents
Дмитрий Николаев, SUP, - Система статистики и рейтингов LiveJournal.com
Дмитрий Николаев, SUP, - Система статистики и рейтингов LiveJournal.com
Media Gorod
Science and Web 2.0: Social Bookmarking (May 2006)
Science and Web 2.0: Social Bookmarking (May 2006)
biocs
Html Metaform дмитрий котеров
Html Metaform дмитрий котеров
Media Gorod
Андрей Кузьмичев – Танки в Лунапарке: нагрузочное тестирование в Яндексе
Андрей Кузьмичев – Танки в Лунапарке: нагрузочное тестирование в Яндексе
Media Gorod
Database automated build and test - SQL In The City Cambridge
Database automated build and test - SQL In The City Cambridge
Red Gate Software
Опыт XML
Опыт XML
Media Gorod
Recomendados
From protein interaction networks to human phenotypes
From protein interaction networks to human phenotypes
biocs
От Статистики до Статистики. Эволюция архитектуры системы на примере системы ...
От Статистики до Статистики. Эволюция архитектуры системы на примере системы ...
yaevents
Дмитрий Николаев, SUP, - Система статистики и рейтингов LiveJournal.com
Дмитрий Николаев, SUP, - Система статистики и рейтингов LiveJournal.com
Media Gorod
Science and Web 2.0: Social Bookmarking (May 2006)
Science and Web 2.0: Social Bookmarking (May 2006)
biocs
Html Metaform дмитрий котеров
Html Metaform дмитрий котеров
Media Gorod
Андрей Кузьмичев – Танки в Лунапарке: нагрузочное тестирование в Яндексе
Андрей Кузьмичев – Танки в Лунапарке: нагрузочное тестирование в Яндексе
Media Gorod
Database automated build and test - SQL In The City Cambridge
Database automated build and test - SQL In The City Cambridge
Red Gate Software
Опыт XML
Опыт XML
Media Gorod
Управление Big data платформой Почты России
Управление Big data платформой Почты России
Andrey Bashchenko
Создание BigData-платформы для ФГУП Почта России / Андрей Бащенко (Luxoft)
Создание BigData-платформы для ФГУП Почта России / Андрей Бащенко (Luxoft)
Ontico
Нагрузочное тестирование как способ планирования ИТ-бюджета
Нагрузочное тестирование как способ планирования ИТ-бюджета
SQALab
ект до 2014 v2
ект до 2014 v2
Expolink
Шойдин (СоДИТ) "Подводные камни при внедрении СЭД"
Шойдин (СоДИТ) "Подводные камни при внедрении СЭД"
Expolink
Внедрение системы управления требованиями. Опыт пользователя
Внедрение системы управления требованиями. Опыт пользователя
SQALab
Евгений Линник. БКС. GIGO — секреты очистки данных
Евгений Линник. БКС. GIGO — секреты очистки данных
Global Innovation Labs
Поисковая аналитика DDS-2 (2016)
Поисковая аналитика DDS-2 (2016)
Стас Поломарь
4. Дмитрий Лазарев - Upgrade Google Analytics c помощью Tableau
4. Дмитрий Лазарев - Upgrade Google Analytics c помощью Tableau
ADLABS
Примеры проектов КРОК
Примеры проектов КРОК
КРОК
Презентация Кибермаркетинг 2013 - SEO KPI
Презентация Кибермаркетинг 2013 - SEO KPI
Stanislav Stavsky
Станислав Поломарь, Работа с контентными порталами на примере Baby.ru, Optimi...
Станислав Поломарь, Работа с контентными порталами на примере Baby.ru, Optimi...
Optimization conference
gigaGantt презентация развёрнутая
gigaGantt презентация развёрнутая
Даниил Ромашов
Deductor Implementation Results
Deductor Implementation Results
Kadimov Mansur
Валентин Макаров - Ситуация с экспортом ИТ-кластера Санкт-Петербурга (России)...
Валентин Макаров - Ситуация с экспортом ИТ-кластера Санкт-Петербурга (России)...
Ingria. Technopark St. Petersburg
Как мы разрабатывали мобильную версию сайта E96
Как мы разрабатывали мобильную версию сайта E96
E96
Operating through the “eyes” of development: Efficient communications
Operating through the “eyes” of development: Efficient communications
DevGAMM Conference
11 nov splunk_conf_мониторинг доступности услуг в мегафон
11 nov splunk_conf_мониторинг доступности услуг в мегафон
Timur Bagirov
Информационные технологии как инструмент повышения производительности труда в...
Информационные технологии как инструмент повышения производительности труда в...
Максим Войцеховский
Мобильная версия E96. Взгляд менеджера и взгляд разработчика (Версия для #ose...
Мобильная версия E96. Взгляд менеджера и взгляд разработчика (Версия для #ose...
Alex
Itogi2013
Itogi2013
Media Gorod
Moneytree rus 1
Moneytree rus 1
Media Gorod
Mais conteúdo relacionado
Semelhante a Олег Юхно – От статистики до статистики. Эволюция архитектуры системы на примере системы расчета статистики Яндекса
Управление Big data платформой Почты России
Управление Big data платформой Почты России
Andrey Bashchenko
Создание BigData-платформы для ФГУП Почта России / Андрей Бащенко (Luxoft)
Создание BigData-платформы для ФГУП Почта России / Андрей Бащенко (Luxoft)
Ontico
Нагрузочное тестирование как способ планирования ИТ-бюджета
Нагрузочное тестирование как способ планирования ИТ-бюджета
SQALab
ект до 2014 v2
ект до 2014 v2
Expolink
Шойдин (СоДИТ) "Подводные камни при внедрении СЭД"
Шойдин (СоДИТ) "Подводные камни при внедрении СЭД"
Expolink
Внедрение системы управления требованиями. Опыт пользователя
Внедрение системы управления требованиями. Опыт пользователя
SQALab
Евгений Линник. БКС. GIGO — секреты очистки данных
Евгений Линник. БКС. GIGO — секреты очистки данных
Global Innovation Labs
Поисковая аналитика DDS-2 (2016)
Поисковая аналитика DDS-2 (2016)
Стас Поломарь
4. Дмитрий Лазарев - Upgrade Google Analytics c помощью Tableau
4. Дмитрий Лазарев - Upgrade Google Analytics c помощью Tableau
ADLABS
Примеры проектов КРОК
Примеры проектов КРОК
КРОК
Презентация Кибермаркетинг 2013 - SEO KPI
Презентация Кибермаркетинг 2013 - SEO KPI
Stanislav Stavsky
Станислав Поломарь, Работа с контентными порталами на примере Baby.ru, Optimi...
Станислав Поломарь, Работа с контентными порталами на примере Baby.ru, Optimi...
Optimization conference
gigaGantt презентация развёрнутая
gigaGantt презентация развёрнутая
Даниил Ромашов
Deductor Implementation Results
Deductor Implementation Results
Kadimov Mansur
Валентин Макаров - Ситуация с экспортом ИТ-кластера Санкт-Петербурга (России)...
Валентин Макаров - Ситуация с экспортом ИТ-кластера Санкт-Петербурга (России)...
Ingria. Technopark St. Petersburg
Как мы разрабатывали мобильную версию сайта E96
Как мы разрабатывали мобильную версию сайта E96
E96
Operating through the “eyes” of development: Efficient communications
Operating through the “eyes” of development: Efficient communications
DevGAMM Conference
11 nov splunk_conf_мониторинг доступности услуг в мегафон
11 nov splunk_conf_мониторинг доступности услуг в мегафон
Timur Bagirov
Информационные технологии как инструмент повышения производительности труда в...
Информационные технологии как инструмент повышения производительности труда в...
Максим Войцеховский
Мобильная версия E96. Взгляд менеджера и взгляд разработчика (Версия для #ose...
Мобильная версия E96. Взгляд менеджера и взгляд разработчика (Версия для #ose...
Alex
Semelhante a Олег Юхно – От статистики до статистики. Эволюция архитектуры системы на примере системы расчета статистики Яндекса
(20)
Управление Big data платформой Почты России
Управление Big data платформой Почты России
Создание BigData-платформы для ФГУП Почта России / Андрей Бащенко (Luxoft)
Создание BigData-платформы для ФГУП Почта России / Андрей Бащенко (Luxoft)
Нагрузочное тестирование как способ планирования ИТ-бюджета
Нагрузочное тестирование как способ планирования ИТ-бюджета
ект до 2014 v2
ект до 2014 v2
Шойдин (СоДИТ) "Подводные камни при внедрении СЭД"
Шойдин (СоДИТ) "Подводные камни при внедрении СЭД"
Внедрение системы управления требованиями. Опыт пользователя
Внедрение системы управления требованиями. Опыт пользователя
Евгений Линник. БКС. GIGO — секреты очистки данных
Евгений Линник. БКС. GIGO — секреты очистки данных
Поисковая аналитика DDS-2 (2016)
Поисковая аналитика DDS-2 (2016)
4. Дмитрий Лазарев - Upgrade Google Analytics c помощью Tableau
4. Дмитрий Лазарев - Upgrade Google Analytics c помощью Tableau
Примеры проектов КРОК
Примеры проектов КРОК
Презентация Кибермаркетинг 2013 - SEO KPI
Презентация Кибермаркетинг 2013 - SEO KPI
Станислав Поломарь, Работа с контентными порталами на примере Baby.ru, Optimi...
Станислав Поломарь, Работа с контентными порталами на примере Baby.ru, Optimi...
gigaGantt презентация развёрнутая
gigaGantt презентация развёрнутая
Deductor Implementation Results
Deductor Implementation Results
Валентин Макаров - Ситуация с экспортом ИТ-кластера Санкт-Петербурга (России)...
Валентин Макаров - Ситуация с экспортом ИТ-кластера Санкт-Петербурга (России)...
Как мы разрабатывали мобильную версию сайта E96
Как мы разрабатывали мобильную версию сайта E96
Operating through the “eyes” of development: Efficient communications
Operating through the “eyes” of development: Efficient communications
11 nov splunk_conf_мониторинг доступности услуг в мегафон
11 nov splunk_conf_мониторинг доступности услуг в мегафон
Информационные технологии как инструмент повышения производительности труда в...
Информационные технологии как инструмент повышения производительности труда в...
Мобильная версия E96. Взгляд менеджера и взгляд разработчика (Версия для #ose...
Мобильная версия E96. Взгляд менеджера и взгляд разработчика (Версия для #ose...
Mais de Media Gorod
Itogi2013
Itogi2013
Media Gorod
Moneytree rus 1
Moneytree rus 1
Media Gorod
Iidf market watch_2013
Iidf market watch_2013
Media Gorod
E travel 2013 ufs-f
E travel 2013 ufs-f
Media Gorod
Travel shop 2013
Travel shop 2013
Media Gorod
Kozyakov pay u_e-travel2013
Kozyakov pay u_e-travel2013
Media Gorod
13909772985295c7a772abc7.11863824
13909772985295c7a772abc7.11863824
Media Gorod
As e-travel 2013
As e-travel 2013
Media Gorod
Ishounkina internet research-projects
Ishounkina internet research-projects
Media Gorod
E travel13
E travel13
Media Gorod
Orlova pay u group_290813_
Orlova pay u group_290813_
Media Gorod
Ep presentation (infographic 2013)
Ep presentation (infographic 2013)
Media Gorod
Iway slides e-travel_2013-11_ready
Iway slides e-travel_2013-11_ready
Media Gorod
Data insight e-travel2013
Data insight e-travel2013
Media Gorod
Электронное Правительство как Продукт
Электронное Правительство как Продукт
Media Gorod
Lean мышление / Специфика Lean Startup
Lean мышление / Специфика Lean Startup
Media Gorod
Глобальный взгляд на мобильный мир (Nielsen)
Глобальный взгляд на мобильный мир (Nielsen)
Media Gorod
Как россияне используют смартфоны (Nielsen)
Как россияне используют смартфоны (Nielsen)
Media Gorod
Мобильный интернет в России (MailRuGroup)
Мобильный интернет в России (MailRuGroup)
Media Gorod
Meta Mass Media
Meta Mass Media
Media Gorod
Mais de Media Gorod
(20)
Itogi2013
Itogi2013
Moneytree rus 1
Moneytree rus 1
Iidf market watch_2013
Iidf market watch_2013
E travel 2013 ufs-f
E travel 2013 ufs-f
Travel shop 2013
Travel shop 2013
Kozyakov pay u_e-travel2013
Kozyakov pay u_e-travel2013
13909772985295c7a772abc7.11863824
13909772985295c7a772abc7.11863824
As e-travel 2013
As e-travel 2013
Ishounkina internet research-projects
Ishounkina internet research-projects
E travel13
E travel13
Orlova pay u group_290813_
Orlova pay u group_290813_
Ep presentation (infographic 2013)
Ep presentation (infographic 2013)
Iway slides e-travel_2013-11_ready
Iway slides e-travel_2013-11_ready
Data insight e-travel2013
Data insight e-travel2013
Электронное Правительство как Продукт
Электронное Правительство как Продукт
Lean мышление / Специфика Lean Startup
Lean мышление / Специфика Lean Startup
Глобальный взгляд на мобильный мир (Nielsen)
Глобальный взгляд на мобильный мир (Nielsen)
Как россияне используют смартфоны (Nielsen)
Как россияне используют смартфоны (Nielsen)
Мобильный интернет в России (MailRuGroup)
Мобильный интернет в России (MailRuGroup)
Meta Mass Media
Meta Mass Media
Олег Юхно – От статистики до статистики. Эволюция архитектуры системы на примере системы расчета статистики Яндекса
1.
От Статистики до
Статистики Яндекс Докладчик: Юхно Олег руководитель группы администрирования email: olegu@yandex-team.ru 11
2.
О чем я
хочу рассказать? Развитии системы статистики 2 Проблемах и их решении
3.
Зачем нужна система
расчета статистики 3
4.
Почему нужна система
расчета статистики 4 Много проектов Много данных Потребовалось считать статистику регулярно и единообразно
5.
5
6.
6 Сначала данных и
проектов было мало < 10Gb в сутки
7.
8
8.
9 Данных и проектов
еще было мало < 100Gb в сутки
9.
11
10.
Когда данных стало
200-300Гб в сутки 12
11.
Вторая попытка масштабирования 14 Пределы
экстенсивного роста
12.
Финальное решение
13.
16
14.
17
15.
18 Сейчас ежесуточно статистика
обрабатывает 2-3Тб данных
16.
19
17.
А будет еще
больше… 21Рост в 3-4 раза каждый год!
18.
Итог: 25 Децентрализация системы Специализация компонентов Автономность компонентов «Простота» компонентов Отказоустойчивость Производительность Простота
в обслуживании и высокая эффективность
19.
Спасибо! Юхно Олег руководитель группы
администрирования email: olegu@yandex-team.ru 26
Baixar agora