Индексация — когда поисковый робот обошёл страницу и добавил её в индекс. Без индексации страница не появится в выдаче, даже если она идеально оптимизирована.
Ускорить индексацию помогают: sitemap.xml, внутренние ссылки, осмысленный контент без воды, отсутствие блокировок в robots.txt и корректные HTTP-коды. В Яндексе — переобход в Вебмастере.
Главная ловушка — путать обход и индексацию. Робот может скачать страницу (это видно в логах и в разделе «Статистика обхода» Вебмастера), но не добавить её в индекс: тогда в статусе появляется «Малоценная или маловостребованная страница». Это не баг, а вердикт о качестве — дубли, тонкий контент, пустые карточки фильтров. В Google аналог — статус «Просканировано, но пока не проиндексировано» в отчёте «Страницы» Search Console.
Яндекс и Google индексируют по-разному. У Google индекс почти мгновенный для авторитетных доменов, но капризный к качеству; у Яндекса обновление выдачи исторически шло апдейтами, сейчас быстрее, но крупные сайты упираются в краулинговый бюджет — робот не успевает обойти всё. Проверять статус каждой страницы стоит через оператор url: в Яндексе и site: в Google, либо пакетно через API Вебмастера. Закрытие в robots.txt не убирает уже проиндексированную страницу из выдачи — для удаления нужен noindex или 404/410 с корректным HTTP-кодом.
Страница доступна (код 200), не закрыта в robots.txt и попала в очередь обхода через sitemap или внутренние ссылки.
Контент признан ценным и неуникальным дублем — только тогда URL появляется в индексе и его находит оператор url:.
Проиндексированная страница участвует в выдаче; без первых двух шагов любая оптимизация бесполезна.
Интернет-магазин на 40 000 товаров видит в Вебмастере: обойдено 38 000 URL, в поиске — 12 000. Разница — карточки с пустым описанием и страницы фильтров вида /catalog/?color=red&size=42, попавшие в статус «Малоценная». После закрытия фильтров через clean-param и добавления уникальных описаний к 5 000 товаров за два месяца в индексе стало 19 000 страниц, органика выросла на 34%.