Google перестал замечать почти половину контента
От 35 до 40 процентов новых веб-страниц и ссылок физически не попадает в базы поисковых систем. В консолях вебмастеров появляется «глухой» статус «Просканировано, но не проиндексировано». В этом состоянии URL остаются полностью невидимыми для пользователей. Ещё 15 процентов ссылок поисковые роботы не удостаивают даже первичного обхода. К такому выводу пришли аналитики международной платформы технического SEOSpeedyIndex в ходе масштабного исследования инфраструктуры поиска, который включал анализ более миллиона URL.
Аналитики считают, что текущий кризис индексации был математически неизбежен и копился годами. В 2023 году, когда генеративные нейросети хлынули в массовое пользование, объём публикуемого контента вырос кратно. В ответ Google запустил чистки: алгоритмы Helpful Content Update и SpamBrain удаляли из выдачи страницы низкого качества. Но к 2025 году стало ясно, что проблема не только в качестве, но и в физических мощностях. Дата-центры перестали справляться с бесконечным потоком новых адресов. Стратегия поисковиков окончательно сместилась от концепции «проиндексировать всё» к жесткой экономии краулингового бюджета (вычислительных ресурсов, выделяемых ботам на обход сайтов). В 2026 году рынок столкнулся с последствиями этой оптимизации. Ежедневная выгрузка терабайтов ИИ-контента вынудила алгоритмы стать предельно избирательными.
«Поисковые системы физически больше не могут переварить весь объем создаваемых сайтов. Если три года назад добавление страницы в индекс занимало считанные часы и происходило по умолчанию, то сегодня попадание в базу — это привилегия. Алгоритмы экономят серверные мощности. Они мгновенно отсекают любые URL, которые не обладают ярко выраженной технической и информационной ценностью в первые же миллисекунды сканирования», — комментирует Виктор Добров, руководитель исследовательского проекта SpeedyIndex.
Для бизнеса это оборачивается катастрофой. Компании продолжают вкладывать сотни тысяч рублей в контент-маркетинг и внешний PR, ориентируясь на правила пятилетней давности. Но инвестиции сгорают, так как поисковик отказывается пускать свежие материалы в базу, обнуляя рентабельность кампаний.
По прогнозам авторов отчёта, в ближайшие годы конкурентная борьба перейдёт из плоскости «кто больше напишет» в плоскость технического аудита, мониторинга серверов и принудительного контроля попадания ключевых данных в поле зрения поисковых роботов. Без этого выжить в новом цифровом ландшафте станет практически невозможно.
