Программа ставится на компьютер и ползёт по сайту от ссылки к ссылке. На выходе — список всех URL с кодами ответа, тайтлами, дескрипшенами, заголовками H1, директивами robots и canonical. Битые ссылки, цепочки редиректов, дубли метатегов, страницы без H1 — всё видно сразу.
Бесплатная версия обходит до 500 URL, чего хватает для небольшого сайта. На крупных проектах беру платную лицензию и подключаю рендеринг JavaScript, чтобы краулер видел контент так же, как Googlebot. Связка со Search Console и Analytics через API добавляет к каждому URL данные по трафику.
Программа сканирует сайт с компьютера, как робот поисковика.
Бесплатно обходит до 500 адресов, дальше нужна лицензия.
Находит ошибки 404, редиректы и дубли <title> за минуты.
Запустили SEO-аудит сайта на 4000 страниц: краулер за 20 минут нашёл 320 битых ссылок, 45 страниц с дублями <title> и 12 редирект-цепочек. До — ничего не знали, после — готовый список на исправление.