02.03.21 Collaborator.pro Webinar Решение 10 главных задач технической оптимизации сайта (Влад Моргун)

1. Решение 10 главных задач
технической оптимизации

2. Всем привет :)
● SEO-team lead ЛУН & Flatfy
● Куратор курса Product SEO в PRJCTR
● Лектор академии WebPromo
● SEO-консультант
● Автор Telegram канала ProductSEO
Это я

3. Сайт #1 по недвижимости
в Украине
Международный бренд ЛУН

4. Философия
Section
0

5. 10 главных задач

6. Roadmap
1. Сканирование
2. Robots.txt
3. Crawl budget, Waste of
4. Индексация
5. Index waste
6. Скорость
7. Синтетика и живой опыт
8. Машиночитаемость
9. Рендеринг
10. Разметки

7. Google тоже хочет заработать

8. 1. Сканирование
2.Индексация
3.Рендеринг
4.Ранжирование
1.Формирование
списка страниц для
индексации
2.Создание индекса
(обработка данных)
3.Обработка
JavaScript и т.д.
4.Ответ от ПС основанный на
факторах ранжирования
Работа поиска (ПС)

9. Краулинговый
бюджет, robots.txt,
etc.
Section
1

10. Crawl volume (budget)
Bot crawl volume - number of requests

11. Settings
->
Crawl Stats
https://search.google.com/search-con
sole/settings/crawl-stats?resource_id=

12. Краулинговый бюджет
https://search.google.com/search-console/settings/crawl-stats?resource_id=

13. Краулинговый бюджет
https://search.google.com/search-console/settings/crawl-stats?resource_id=
Проваливаемся внутрь категории
(тип файла, ответ и т.д.) и
используем фильтры
(из-за лимита в 1000)

14. Парсинг данных
Нет API - не беда.
● Selenium
● Web Scraper Chrome Extension
● Watir
● …
● Руки junior спеца
https://t.me/productseo/40

15. Особенности отчета crawl stats

16. Важные отчеты

17. Uptime
Хотя бы

18. Логи сервера
Файлы, содержащие системную информацию о работе
сервера, в которых протоколируются все действия
пользователя на сайте, а также информацию,
используемую для анализа и оценки сайтов и их
посетителей.

19. Логи
Файл с записями о запросах (hit`ах), которые получил
сервер

20. Пример
192.168.1.11 - [03/Sep/2021:00:00:00 -0400] - "GET
/calendar/next HTTP/1.1" 200 - "Mozilla/5.0 (compatible;
Googlebot/2.1; +http://www.google.com/bot.html)"

21. Софт (порядок случайный)
1. ELK
2. Splunk
3. Screaming Frog SEO Log File Analyser
4. Sumo logic
5. Botify
6. OnCrawl
7. Dataiku
8. SemRush
9. JetOctopus

22. ELK stack

23. Общий вид (Kibana)

24. Локализация проблем
Все url
/*?*
/*?*sort=
/*?* AND NOT /*?*sort=

25. Парсинг Google выдачи
site:domain.com inurl:sort=
https://t.me/productseo/43

26. Кейсы потери crawl бюджета
https://t.me/productseo/10
https://t.me/productseo/11
● Счетчик просмотров
● Редирект с удаленной страницы на get параметр
● Пиксель своей аналитики
● Массовая перегенерация картинок
● Ошибка в robots.txt

27. Robots.txt и Regex
Disallow: /login
Читаем как
Disallow: ^/login*
/uk/login не попадет

28. Robots.txt: доверяй, но проверяй

29. Robots.txt: доверяй, но проверяй
Проверяйте справку при использовании операторов
(например, crawl-delay)
https://www.youtube.com/watch?v=ZSghHC_4LzU

30. Скорость сканирования
https://t.me/productseo/40

31. Google Bot: особенности
no cookiescache
🍪
между сессиями Зачастую USA IP󾓦
https://support.google.com/webmasters/answer/40349?hl=en
https://developers.google.com/search/docs/advanced/crawling/locale-adaptive-pages

32. Кейсы cookie ip
Ведем себя как с новым неизвестным нам ранее пользователем
Не ранжируются языковые версии? Точно нет редиректов
по geo ip?

33. Скорость загрузки,
рендеринг
Section
2

34. Особенности рендеринга
“Googlebot and its Web Rendering Service (WRS)
component continuously analyze and identify
resources that don’t contribute to essential page
content and may not fetch such resources. For
example, reporting and error requests that don’t
contribute to essential page content, and other similar
types of requests are unused or unnecessary to extract
essential page content.”
https://developers.google.com/search/docs/guides/fix-search-javascript

35. Server-side rendering:
Server-side rendering (SSR) - страница рендерится web
server`ом как часть цикла запрос-ответ.
Состояние виртуального DOM конвертируется в HTML
строку и добавляется на страницу перед отправкой
клиенту. После получения страницы клиентом JS app будет
легко работать поверх существующего контента.
Lynx: https://support.google.com/webmasters/answer/40349?hl=en

36. SPA:

37. Когда сайт без SSR

38. Не забываем:
Отключать JS
Проверять cache

39. Отображение через якоря:

40. Speed update:
А помните Top Heavy? :)

41. Performance:
● Определить шаблонные страницы
● Определить KPI для замеров (HTML size, CSS size,
TTFB, CLS …)
● Замерять в динамике автоматическими тестами
● Наложить на графики коммиты

42. Performance:

43. Performance проще (GSC&GA):

44. Разметки:
https://search.google.com/structured-data/testing-tool/u/0/#url=
https://search.google.com/test/rich-results

45. Разметки:

46. Разметки:

47. Вопросы
Section
3

48. Спасибо
за внимание!

49. Владислав Моргун
SEO Team-lead ЛУН & Flatfy
Контакты:
facebook.com/vladislav.morgun.3
t.me/m0r9un
vladislavmorgun@gmail.com
Каналы:
facebook.com/m0r9un
t.me/productseo
slideshare.net/ssuser12bc85