Справочный центр SEO Crawler

Документация по SEO Crawler: как запустить обход, как читать отчёт аудита, как исправить найденные проблемы. Все инструкции — со скриншотами интерфейса и ссылками на разделы продукта.

Не нашли ответ на свой вопрос? Нажмите Фидбэк в шапке сайта — мы ответим в течение рабочего дня.

Быстрый старт

1. Запустите обход

Как указать URL, выбрать глубину, скорость и паттерны. Что такое BFS-обход и сколько страниц можно проверить

2. Откройте отчёт

Где смотреть Health Score, какие вкладки есть на странице аудита и как фильтровать список страниц

3. Исправьте проблемы

Откройте «Чек-лист SEO-аудита сайта: 20 пунктов для новичков» и пройдите базовые проверки: title, H1, meta-description, canonical, скорость и редиректы

Начало работы

Как работает краулер

Принцип BFS-обхода, сбор данных на каждой странице, статусы задач и ограничения тарифов

Краулинг и диагностика

Сайт не обходится

Почему краулер возвращает 0 страниц: редиректы, Cloudflare, robots.txt, JS-рендеринг и таймауты

robots.txt и noindex

Как краулер читает директивы robots.txt, meta robots и X-Robots-Tag. Fail-open поведение и User-Agent

TTFB и скорость ответа

Что такое Time To First Byte, какие пороги использует SEO Crawler и как снизить TTFB на практике

SEO-проверки в отчёте

Title и H1

Пороги длины title, дубли, отсутствие H1, совпадение H1 = Title. Влияние на CTR и ранжирование

Meta-теги и Open Graph

Description, meta robots, атрибут lang, Open Graph и Twitter Card — где посмотреть в отчёте

Ссылки и canonical

Canonical URL, битые внутренние ссылки, перелинковка, изображения без alt и их влияние на SEO

HTTP-статусы

Ошибки 4xx и 5xx, soft-404, недоступные страницы, что проверить у хостера и в коде

Контент и thin pages

Количество слов, thin content, дубли контента, глубина страниц от главной и вложенность

Скорость и редиректы

Цепочки редиректов 301/302, размер страницы, медленные URL, связь с Core Web Vitals

Отчёты и экспорт

CSV, XLSX и PDF

Какие форматы доступны на каком тарифе, что входит в 17 листов XLSX и структура PDF-отчёта

Тарифы и лимиты

Free, Pro и Max

Сравнение тарифов: страницы за обход, лимит обходов, форматы экспорта, расписания и уведомления

Хочешь разобраться в теории SEO?

В справочнике — документация по продукту: где что нажать, какие пороги использует SEO Crawler, как читать отчёт. Если нужна теория — как устроен поиск, как работают алгоритмы ранжирования, какие есть методики технического SEO — заходите в блог.

Блог SEO Crawler

Обзоры, гайды и практические разборы без привязки к продукту: hreflang, Core Web Vitals, чек-листы

Частые вопросы

Что такое SEO Crawler?

SEO Crawler — онлайн-сервис технического SEO-аудита. Вы указываете URL сайта, краулер обходит страницы, собирает метаданные и выдаёт отчёт с Health Score, списком проблем и рекомендациями. Результаты можно выгрузить в CSV, XLSX или PDF.

Насколько глубоко обходится сайт?

По умолчанию глубина обхода не ограничена — краулер идёт по всем внутренним ссылкам в рамках лимита страниц тарифа. На Free — до 50 страниц за обход, на Pro — до 500, на Max — до 5 000. Глубину, скорость и паттерны URL можно настроить при запуске.

Сколько стоит SEO Crawler?

На тарифе Free проверки бесплатны: до 50 страниц за обход и 5 обходов в месяц. При регистрации активируется 7-дневный триал с полным доступом к функциям Pro. После окончания триала аккаунт переходит на Free без потери данных.

Чем Free отличается от Pro?

Free: до 50 страниц, 5 обходов в месяц, экспорт в CSV. Pro: до 500 страниц, без лимита обходов, экспорт CSV / XLSX / PDF, шаринг отчёта по ссылке, расписания авто-обходов и email-уведомления. Подробное сравнение — в разделе «Тарифы».

Можно ли проверить закрытый staging-сайт?

Да, если сайт доступен из интернета по HTTPS. Для обхода сайтов под HTTP-Basic Auth или с закрытым robots.txt используйте пользовательский User-Agent и снимите ограничения в robots.txt для IP краулера. Локальные адреса (127.0.0.1, внутренние сети) недоступны из-за SSRF-защиты.

Где посмотреть отчёт после обхода?

После завершения задача открывается на странице аудита с вкладками «Обзор», «Контент», «Техническое», «Скорость», «Безопасность» и «Все страницы». Итоговый Health Score и ключевые проблемы вынесены на «Обзор».