Исследование Website Auditor показало парадоксальную ситуацию в SEO: лишь 8,9% сайтов активно блокируют ИИ-краулеры через robots.txt, однако 94,8% ресурсов остаются полностью невидимыми для генеративных ответов ИИ. Это означает, что подавляющее большинство контента в сети не попадает в обучающие выборки или контекстные окна моделей, что создает новые вызовы для органического трафика и маркетинговых стратегий.
Анализ охватил 100 000 доменов, чтобы оценить, как часто поисковые системы на базе ИИ (такие как Perplexity или SearchGPT) ссылаются на конкретные ресурсы. Выяснилось, что блокировка краулеров не является главной причиной низкой цитируемости. Основным фактором становится алгоритмический отбор: модели отдают предпочтение авторитетным источникам с высоким показателем E-E-A-T, игнорируя сайты с низким качеством контента или слабой технической оптимизацией.
Для владельцев бизнеса и маркетологов это означает смену парадигмы SEO. Если раньше фокус был на ранжировании в поисковой выдаче по ключевым словам, то теперь приоритетом становится «AI-оптимизация» (AIO). Бренды, которые не попадают в ответы ИИ, рискуют потерять значительную долю целевой аудитории, так как пользователи всё чаще получают готовые ответы без перехода на исходные страницы.
Ключевые факты
- 8,9% сайтов используют директивы в robots.txt для запрета доступа ИИ-ботам.
- 94,8% проанализированных доменов не получили ни одной ссылки в ответах ИИ-поисковиков.
- Исследование базируется на выборке из 100 000 сайтов разной тематики.
- Только 5,2% ресурсов обеспечивают себе регулярную цитируемость в генеративных ответах.
- Основным критерием попадания в ответы ИИ является авторитетность домена и релевантность контента, а не отсутствие блокировок.