Даже если вы создаёте отличный контент, технические ошибки могут снизить позиции вашего сайта. Битые ссылки, отсутствующие теги заголовков и цепочки редиректов не найти вручную, просматривая страницы одну за другой. Screaming Frog SEO Spider — настольная программа, которая сканирует ваш сайт, как поисковая система, и выводит все эти проблемы в одном списке.

Разница между бесплатной и платной версиями

Бесплатная версия Screaming Frog сканирует до 500 адресов за одно сканирование. Этого может хватить для небольших сайтов, однако интернет-магазины и сайты с контентом быстро превышают этот лимит. Лицензионная версия открывает:

  • Сканирование неограниченного количества адресов
  • Сканирование страниц, которые создаются с помощью JavaScript (рендеринг)
  • Извлечение пользовательских данных (custom extraction) и пользовательский поиск
  • Интеграцию с Google Search Console и Analytics
  • Сохранение сканирований и их сравнение

Лицензионную версию можно получить в виде Screaming Frog на 1 год или именного Screaming Frog.

Шаг 1: первое сканирование

Откройте программу, введите адрес своего сайта в верхнее поле и нажмите Start. Когда сканирование завершится, проблемы будут перечислены по категориям на панели Overview справа.

Шаг 2: проверьте коды ответа

  • 4xx (Client Error): битые ссылки. Вкладка Inlinks в нижней панели показывает, с каких страниц ведут ссылки на битую страницу; исправьте эти ссылки или настройте для них редирект.
  • 3xx (Redirection): редиректы. Добейтесь того, чтобы внутренние ссылки сайта сразу вели на конечный адрес; цепочки редиректов негативно влияют на краулинговый бюджет и скорость.
  • 5xx (Server Error): ошибки сервера; они могут быть вызваны хостингом или плагином, поэтому проверяйте их в первую очередь.

Шаг 3: заголовки и мета-описания

На вкладках Page Titles и Meta Description обратите внимание на следующие фильтры:

  • Missing: страницы без заголовка или описания
  • Duplicate: страницы с одинаковым заголовком
  • Over/Below X Characters: слишком длинные или слишком короткие

У каждой страницы должны быть уникальный заголовок и описание с ключевым словом. В WordPress их можно легко отредактировать с помощью SEO-плагинов, например Rank Math Pro или AIOSEO.

Шаг 4: теги заголовков (H1/H2)

На вкладке H1 найдите страницы, на которых нет H1 или используется несколько H1. Рекомендуется, чтобы на каждой странице был один H1, кратко описывающий её тему.

Шаг 5: изображения

На вкладке Images отфильтруйте изображения большого размера и те, у которых нет alt-текста. Большие изображения замедляют страницу, а отсутствие alt-текста — это потеря и для доступности, и для поиска по картинкам.

Шаг 6: canonical и индексируемость

Вкладки Canonicals и Directives показывают страницы, которые по ошибке получили noindex или содержат неверный canonical-тег. Закрытая от индексации важная страница — одна из самых распространённых и дорогостоящих ошибок.

Шаг 7: создайте XML-карту сайта

Через меню Sitemaps → XML Sitemap можно создать карту сайта из просканированных страниц, а также просканировать существующую карту сайта и проверить, нет ли в ней неверных адресов.

Как часто нужно сканировать?

Для небольших сайтов хорошей привычкой является сканирование раз в месяц, а для сайтов с частым добавлением контента и интернет-магазинов — раз в неделю. После крупного изменения дизайна или переезда обязательно проведите полное сканирование.

Заключение

Screaming Frog выявляет технические SEO-проблемы за считанные минуты. Исправляя найденные проблемы по приоритету (сначала 4xx/5xx и проблемы индексации, затем мета-данные и изображения), вы быстро улучшите показатели сайта в поисковых системах. Другие инструменты вы найдёте в нашей категории SEO-инструменты.

Часто задаваемые вопросы

Работает ли Screaming Frog на Mac и Linux?

Да. Screaming Frog SEO Spider выпускается для Windows, macOS и Linux (Ubuntu), а лицензионный ключ работает на всех платформах.

Будет ли сайт тормозить во время сканирования?

Стандартная скорость не вызывает проблем для большинства сайтов; однако на общем хостинге интенсивное сканирование может нагрузить сервер. Чтобы замедлить сканирование, уменьшите количество одновременных запросов в меню Configuration → Speed.

В чём разница между Screaming Frog и Google Search Console?

Search Console показывает, как Google видит ваш сайт, и его поисковые показатели. Screaming Frog же мгновенно сканирует сайт от начала до конца и перечисляет технические проблемы. Эти инструменты дополняют друг друга, и их рекомендуется использовать вместе.