Screaming Frog SEO Spider — десктопная программа для сканирования сайта. Незаменимый инструмент при проведении технического аудита.
Ключевые функции программы:
- Поиск битых страниц и страниц с редиректами. Отображение анкоров и самих документов, на которых находятся ссылки на данные страницы.
- Поиск страниц с короткими, длинными, дублирующимися тегами title, а также с тегами title, содержимое которых совпадает с тегом h1.
- Поиск страниц с короткими, длинными, дублирующимися и отсутствующими мета-тегами description.
- Поиск страниц, на которых тег h1 встречается более одного раза или не встречается вовсе.
- Поиск изображений с большим размером, а также с отсутствующими и длинными атрибутами alt и title тега img.
- Отображение информации по meta-тегам, управляющими поисковыми роботами (атрибуты rel="canonical", rel="next", rel="prev" тега link).
- Поиск страниц по заданному фрагменту, выгрузка содержимого определенных тегов по регулярному выражению (например, можно спарсить все h5 заголовки или все тексты на сайте).
- Поиск дублей страниц по хэш-сумме исходного кода.
- Отображение структуры сайта и уровня вложенности страниц. Визуализация данных.
- Проверка времени загрузки страниц.