Почему сайт открыт только для ботов и висит в топе Яндекса?

В серых нишах часто встречается техника, когда основной домен site.com доступен только для поисковых роботов, а реальные пользователи получают 301 редирект на поддомен c.site.com. Такая схема вызывает много вопросов: зачем это делается, не блокирует ли РКН оба адреса сразу и как сайт с чисто ботовым трафиком удерживается в топе поисковой выдачи? Разберёмся по порядку.

Зачем сайт открывают только для ботов?

Основная цель - обход блокировок со стороны РКН или хостинг-провайдера. Если основной домен попадает под фильтр, владельцы перенаправляют реальных посетителей на поддомен, который часто имеет другую IP-адресацию или размещается на зарубежном хостинге. Поисковые боты видят чистую версию сайта без редиректов, что позволяет сохранить индексацию и позиции.

Как это технически реализуется?

Настройка выполняется на уровне сервера (Nginx, Apache) или через файл .htaccess. Проверяется User-Agent посетителя: если это бот Яндекса (YandexBot) или Google (Googlebot), отдаётся контент с HTTP 200. Для всех остальных - 301 редирект на поддомен. Пример конфигурации:

if ($http_user_agent ~* (YandexBot|Googlebot)) { set $bot_access 1; } if ($bot_access !~ 1) { rewrite ^ http://c.site.com$request_uri? permanent; }

Почему РКН не блокирует оба домена?

Блокировка обычно идёт по IP-адресу или доменному имени. Если поддомен размещён на другом IP, он может оставаться доступным для пользователей. Однако в последнее время РКН действительно блокирует и поддомены, и основной домен, если они обслуживают один и тот же ресурс. Поэтому схема становится менее надёжной, но всё ещё работает, если поддомен постоянно менять или использовать CDN с динамическими IP.

Как сайт с ботовым трафиком попадает в топ выдачи?

Для Яндекса и Google неважно, видят ли сайт реальные пользователи. Поисковики оценивают релевантность контента, ссылочную массу, поведенческие факторы (которые в данном случае отсутствуют) и технические параметры. Если сайт имеет качественные внешние ссылки, уникальный контент и правильно настроен для ботов, он может занимать высокие позиции даже при нулевом пользовательском трафике. Однако со временем отсутствие поведенческих сигналов может привести к падению - это временная мера.

Как защитить свой сайт от бана в будущем?

Чтобы избежать блокировок и сохранить позиции, используйте следующие методы:

• Геораспределение - размещайте контент на нескольких серверах в разных юрисдикциях.
• CDN с защитой от DDoS - Cloudflare или аналоги скрывают реальный IP.
• Резервные домены - держите 2-3 домена с разными регистраторами.
• SSL-сертификаты - шифрование трафика усложняет перехват.
• Регулярная смена IP - если используете схему с поддоменами, обновляйте их при первых признаках блокировки.

Помните: серая ниша всегда связана с рисками. Лучшая защита - легализация бизнеса или использование зарубежного хостинга с устойчивостью к блокировкам.