Сделали страницу, выложили — а в Яндексе и Google её нет. Знакомо? Индексация — момент, когда поисковый робот зашёл на вашу страницу, прочитал её и добавил в базу поисковика. Без индексации страницы в выдаче не существует, даже если она идеально оптимизирована. Разберём 12 способов ускорить попадание в индекс.
Индексация — момент, когда робот Яндекса или Google зашёл на страницу и добавил её в базу поиска. Скорость зависит от качества сайта, количества внутренних ссылок и внешнего цитирования. Главные ускорители: sitemap.xml, переобход в Вебмастере, активные внутренние ссылки на страницу, обратные ссылки извне, регулярные обновления контента.
Что такое индексация сайта
Индексация — это процесс, когда поисковый робот заходит на страницу вашего сайта, читает её и добавляет в индекс (базу поиска). Только после этого страница может появиться в выдаче.
Логика простая: поисковики Яндекса и Google не «знают» о существовании вашей страницы, пока их робот её не посетил. Робот ходит по интернету через ссылки: пришёл по одной ссылке, нашёл новые, пошёл по ним дальше.
Когда вы публикуете новую страницу, есть несколько сценариев:
- Робот пришёл сам — найдёт страницу через внутренние или внешние ссылки. Обычно занимает 1–4 недели для нового сайта, 1–3 дня для старого.
- Вы сообщили роботу через Вебмастер / Search Console — индексация ускоряется до нескольких часов.
- Робот не пришёл — страница вообще не появится в поиске. Это бывает у новых доменов, технически проблемных страниц, страниц без входящих ссылок.
Почему сайт не индексируется
Самые частые причины:
1. Сайт совсем новый. Молодым доменам Яндекс и Google не доверяют — индексация идёт медленно. Это норма: ждите 2–4 недели, помогайте сигналами.
2. Закрыт в robots.txt. Файл robots.txt в корне сайта говорит роботам, куда можно заходить, а куда нет. Если там Disallow: / — закрыт весь сайт. Проверьте: ваш-сайт.ru/robots.txt
3. Закрыт через мета-тег noindex. На странице может стоять <meta name="robots" content="noindex"> — это говорит роботу не индексировать. Часто остаётся случайно после переноса с тестового сервера.
4. Сайт недоступен для робота. Хостинг падает, сервер возвращает 500 или дольше 10 секунд не отвечает. Робот пробует несколько раз — не получается, уходит.
5. Дубли страниц. Если один и тот же контент доступен по 5 разным URL — Яндекс выбирает один и показывает только его, остальные отбрасывает.
6. Технические проблемы. Большой объём JavaScript без SSR (server-side rendering) — робот может не видеть контент. Закрытие через canonical на другую страницу. Бесконечные редиректы.
7. Низкое качество контента. Тонкий контент (меньше 100 слов), скопированный с других сайтов, набитый ключами без смысла — робот может проиндексировать, но Яндекс не покажет в поиске.
8. Санкции. Если на сайт наложен фильтр (за накрутку поведенческих, искусственные ссылки, пиратство), индексация может замедлиться или прекратиться. Проверьте уведомления в Вебмастере.
12 способов ускорить индексацию
Делать сверху вниз — от обязательных к опциональным.
1. Создайте и подайте sitemap.xml. Это карта вашего сайта в XML-формате. Поисковый робот заходит — видит список всех важных страниц — обходит их. Большинство CMS делают sitemap автоматически. Подайте файл в Яндекс.Вебмастер и Google Search Console.
2. Подключите Вебмастер и Search Console. Это сразу сигнал поисковикам, что вы существуете. Подтверждение прав занимает 10 минут.
3. Используйте «Переобход страниц» в Вебмастере. Это самый быстрый способ сообщить о новой странице. Лимит — около 30 страниц в день. Делайте после публикации каждой важной страницы.
4. Внутренняя перелинковка. Каждая новая страница должна иметь ссылки с уже проиндексированных страниц вашего сайта. Робот пришёл на главную — пошёл по ссылкам — нашёл новую страницу. Чем больше входящих ссылок, тем выше приоритет индексации.
5. Получите хотя бы одну внешнюю ссылку. Ссылка с любого проиндексированного сайта на вашу страницу — мощный сигнал. Это может быть пост в Telegram-канале, профиль на Habr, упоминание в нишевом форуме.
6. Проверьте robots.txt. Убедитесь, что нужные страницы не закрыты. Минимальный рабочий robots.txt: User-agent: *
Allow: /
Sitemap: https://ваш-сайт.ru/sitemap.xml
7. Уберите noindex с нужных страниц. Проверьте мета-теги: <meta name="robots" content="..."> — там не должно быть «noindex» для индексируемых страниц.
8. Ускорьте сайт. Медленный сайт — медленная индексация. Цель — загрузка под 3 секунды на мобильных. PageSpeed Insights в зелёной зоне.
9. Регулярно публикуйте контент. Если сайт обновляется каждый день — робот заходит каждый день. Если раз в полгода — раз в полгода. Хотя бы 2–4 публикации в месяц обеспечивают регулярный обход.
10. Делайте обновления контента. Меняйте даты публикации, добавляйте новую информацию, обновляйте устаревшие данные. Робот видит изменения — снова заходит и переиндексирует.
11. Анонсируйте новые страницы в соцсетях. Telegram, ВКонтакте, форумы — каждый шер увеличивает количество переходов на страницу. Это косвенный сигнал для поисковика.
12. Откажитесь от тонкого контента. Объедините слабые страницы в одну большую полезную. У робота есть «бюджет обхода» — не тратьте его на 5-словные страницы.
Как проверить, в индексе ли страница
Самый простой способ — вбить в Яндексе:
url:ваш-сайт.ru/страница
Если страница в выдаче — она в индексе. Если результаты пустые — нет.
В Google аналогично:
site:ваш-сайт.ru/страница
Точный отчёт — в Вебмастере (раздел «Индексирование → Страницы в поиске») и Search Console (раздел «Индексирование → Покрытие»). Там видна вся статистика: проиндексировано, исключено, причины исключений.
Сколько ждать индексации
Реалистичные сроки:
- Старый сайт с историей (3+ года, регулярный трафик) — новая страница в индексе за 1–7 дней. С переобходом — несколько часов.
- Активный сайт (1–3 года, регулярные публикации) — 1–2 недели. С переобходом — 1–2 дня.
- Молодой сайт (до года) — 2–4 недели. С переобходом — 1 неделя.
- Совсем новый домен (меньше 3 месяцев) — 1–2 месяца на первую партию страниц. Дальше ускоряется.
Если за 2 месяца страница так и не в индексе — проблема не во времени, а в чём-то другом. Проверяйте по списку причин из второго раздела или закажите SEO-аудит, чтобы найти проблему.
Главное
Индексация — момент, когда робот добавляет страницу в базу поисковика. Без индексации страницы в выдаче не существует.
Базовый набор для быстрой индексации: подключённые Вебмастер и Search Console, sitemap.xml, внутренние ссылки на новые страницы, переобход в Вебмастере после публикации, регулярные обновления контента.
Если страница уже месяц не в индексе — проблема не во времени. Проверяйте robots.txt, noindex, скорость сайта, дубли. Или закажите аудит.
Частые вопросы
Что такое индексация сайта?
Это процесс, когда поисковый робот Яндекса или Google заходит на страницу вашего сайта, читает её содержимое и добавляет в базу поисковика. Только после этого страница может появиться в результатах поиска по запросам пользователей.
Почему мой сайт не в индексе Яндекса?
Самые частые причины: сайт новый (нужно подождать 2–4 недели), закрыт в robots.txt, на страницах стоит мета-тег noindex, сервер часто падает или медленно отвечает, есть дубли страниц, наложены санкции. Проверять начинайте с robots.txt.
Как ускорить индексацию страницы?
Подключите Яндекс.Вебмастер и Google Search Console, добавьте sitemap.xml, отправляйте новые страницы на «Переобход» в Вебмастере, делайте внутренние ссылки с уже проиндексированных страниц, получите хотя бы одну внешнюю ссылку на страницу, регулярно публикуйте новый контент.
Сколько времени занимает индексация?
Для старого сайта с историей — 1–7 дней без переобхода, несколько часов с переобходом. Для молодого сайта — 2–4 недели без переобхода. Для совсем нового домена — до 2 месяцев на первую партию страниц.
Как проверить, в индексе ли страница?
В Яндексе вбейте «url:адрес-страницы», в Google — «site:адрес-страницы». Если страница в выдаче — она в индексе. Полная статистика — в Яндекс.Вебмастере (раздел «Индексирование») и Google Search Console (раздел «Покрытие»).
Что такое переобход в Я.Вебмастере?
Функция, которой можно срочно сообщить Яндексу о новой или обновлённой странице. Робот зайдёт быстрее обычного. Лимит — около 30 страниц в день для среднего сайта. Используйте для важных страниц сразу после публикации.