Краулеры и программы для технического аудита сайта
Программы, которые обходят сайт целиком и показывают битые ссылки, дубли, редиректы и структуру.
Программа обходит сайт так же, как это делает робот поисковика, и показывает, что он видит: битые ссылки, цепочки редиректов, дубли заголовков, закрытые от индексации страницы, структуру перелинковки. На большом каталоге это единственный способ найти проблему, о существовании которой никто не знал.
Screaming Frog SEO Spiderscreamingfrog.co.ukНастольный краулер, стандарт технического аудита
есть бесплатный тарифустановка на ПК
Netpeak Spidernetpeaksoftware.comКраулер с русскоязычным интерфейсом
есть бесплатный тарифустановка на ПК
SiteAnalyzersite-analyzer.ruБесплатный настольный сканер сайта
есть бесплатный тарифустановка на ПК
Bertalbertal.ruОтвет сервера глазами разных клиентов
бесплатный
JetOctopusjetoctopus.comОблачный краулер и анализ логов сервера
пробный периодAPI
A-Parsera-parser.comМногопоточный парсер под свои задачи
APIустановка на ПК
Sitecheckersitechecker.proКраулер, мониторинг изменений и трекер позиций
пробный период
Netpeak Checkernetpeaksoftware.comМассовая проверка списка адресов и доменов
пробный периодустановка на ПКЧем отличаются друг от друга
Столбцы сортируются. Прочерк означает, что на сайте сервиса про это ничего не сказано.
← таблица прокручивается вбок →
| Сервис↕ | Бесплатный доступ↕ | Где работает↕ | Интерфейс↕ | API↕ | Юрлицо в РФ↕ | Реестр ПО↕ | Порог входа↕ |
|---|---|---|---|---|---|---|---|
| Screaming Frog SEO Spider | есть тариф | Windows, macOS, Linux | английский | — | нет | — | 5 |
| Netpeak Spider | есть тариф | Windows, macOS | — | — | нет | — | 5 |
| SiteAnalyzer | есть тариф | Windows, Linux, macOS | русский | — | да | да | 7 |
| Bertal | бесплатный | веб | русский | — | — | — | 8 |
| JetOctopus | пробный период | веб | английский | есть | нет | — | 6,5 |
| A-Parser | только платно | Windows, Linux, macOS (Docker) | русский | есть | нет | — | 6 |
| Sitechecker | пробный период | браузер | — | — | нет | — | 4,5 |
| Netpeak Checker | пробный период | Windows | — | — | — | — | 3 |
«Порог входа» — расчёт по фактам с сайта: бесплатный доступ, открытые тарифы, русский интерфейс, работа без установки, наличие API и видимая поддержка. Он говорит о том, насколько легко начать, и ничего не говорит о качестве работы инструмента. Полная таблица по всему каталогу — на странице сравнения сервисов.
Как выбирать в этом разделе
Частые вопросы
Настольный краулер или облачный?
Настольный дешевле и держит данные у вас, но на сайтах от сотен тысяч страниц упирается в память машины. Облачный считает у себя и берёт деньги за объём обхода.
Как часто гонять полный обход?
После крупных правок и релизов — обязательно. В спокойном режиме раз в месяц достаточно, чтобы новые ошибки не копились незаметно.
Цифры есть — нужна стратегия?
Калькуляторы помогают принять решение. Внедрение, рост трафика и заявок — в услугах и кейсах.