Презентация с вебинара проведенного Алексеем Данилиным 26 мая в рамках проекта bewebby.ru. Тезисы выступления: -Обзор возможностей инструментов. -Сравнение инструментов и их отличия. -Кейсы. -Анализ сайта с миллионами страниц. -Анализ сайта, чувствительного к высоким нагрузкам. -Анализ сайта с защитой от роботов.

1. Алексей
Данилин
Инструменты для технического
анализа сайта

2. Какие программы сегодня рассмотрим?
1. XENU
2. Screaming Frog
3. Netpeak Spider

3. XENU - Интерфейс

4. XENU - Настройки

5. XENU – Настройки сканирования

6. XENU – Результаты сканирования

7. XENU – Несколько результатов сканирования

8. XENU – Для URL
+открыть ссылку в браузере
+проверка Google Cache
+проверка в web.archive.org
+проверка в Alexa

9. XENU – Данные по URL
- Address
- Status
- Type
- Size
- Title
- Date
- Level
- Out Links
- In Links
- Server
- Error
- Duration
- Charset
- Description

10. XENU – Экспорт данных

11. XENU – Формирование отчета

12. XENU – сводная статистика

13. Screaming Frog – Интерфейс

14. Screaming Frog – Настройки
В бесплатной версии можно настроить только Proxy

15. Screaming Frog – Результаты сканирования

16. Screaming Frog – Для URL

17. Screaming Frog – Данные по URL
- Address
- Content
- Status Code
- Status
- Title N
- Title N Length
- Title N Pixel Width
- Meta Description N
- Meta Description Length N
- Meta Description Pixel Width N
- Meta Keyword N
- Meta Keyword Length N
- H1-N
- H1-len-N
- H2-N
- H2-len-N
- Meta Robots N
- Meta Refresh N
- Canonical Link Element N
- Size
- Word Count
- Level
- Inlinks
- Outlinks
- External Outlinks
- Hash
+ X-Robots-Tag N
+ HTTP Canonical
+ rel=“prev”/rel=“next”
+ Ajax

18. Screaming Frog – Экспорт данных

19. Netpeak Spider – Интерфейс

20. Netpeak Spider – Настройки

21. Netpeak Spider – Результаты сканирования

22. Netpeak Spider – Для URL

23. Netpeak Spider – Данные по URL
- #
- Глубина
- URL
- LinkCanonical
- Ответ
- Title
- Description
- Keywords
- robots.txt
- MetaRobots
- Редиректы
- Заголовки (Н1)
- Ссылки с этой страницы
- Ссылки на эту страницу
- Внутренние ссылки
- Внешние ссылки
+ Кол-во символов
+ PR

24. Netpeak Spider – Подсчет PR

25. Netpeak Spider – Экспорт данных

26. Сравнение ПО
Характеристика XENU Screaming Frog Netpeak Spider
Режимы сканирования URL URL, List, SERP URL, раздел, SERP
Анализ нескольких проектов в
1 окне
+ - -
Создание отчета + - -
Создание sitemap.xml + + -
Подсчет PR - - +
Анализ сниппетов - + -
Экспорт в Excel + + +
Сканирование изображений, .js + + +
Количество потоков до 100 5 free до 15
Обновления - + +
Язык интерфейса eng eng ru
Лицензия free 500 URL (£99/год) free

27. Тест сканирования
Характеристика XENU Screaming Frog Netpeak Spider
Количество потоков
сканирования
5 5 5
Типы сканируемых
документов
HTML,
изображения,
JavaScript
HTML,
изображения,
JavaScript
HTML,
изображения,
JavaScript
Количество найденных
файлов
164 67 57
Время сканирования 15 сек 6 сек 11 сек
% просканированных
страниц из
существующих на сайте
100% 100% 100%
Выделяемая память,
КБ
4132 1144 65832

28. Кейсы

29. Кейс 1. Анализ сайта с миллионами страниц
Screaming Frog – уйдут годы на сканирование по 500 URL и
чистку пересечений
Netpeak Spider – нужен очень мощный компьютер
XENU – средний компьютер
~9 часов работы
~1200000 URL просканировано
~250МБ файл отчета.
Лучше разбить на части, ограничить документы по типу и
использовать мощный сервер. Для XENU отключить Site
Map в отчете.

30. Кейс 2. Анализ сайта, чувствительного к высоким
нагрузкам
Уменьшить количество потоков – XENU, Netpeak Spider
Сканировать только HTML документы – Netpeak Spider (из-
за структуры вложенности)

31. Кейс 3. Анализ сайта с защитой от роботов
Screaming Frog, Netpeak Spider
XENU – без проблем со стандартным User Agent
Если ничего не помогает – меняем User Agent в Netpeak
Spider

32. Где скачать?
Netpeak Spider -
http://netpeak.ua/downloads/netpeak-spider-setup.ex
XENU - http://home.snafu.de/tilman/XENU.ZIP
Screaming Frog -
http://www.screamingfrog.co.uk/products/seo-spider/S

33. Алексей Данилин
Middle SEO Specialist в Netpeak
Спасибо за внимание!