Клоакинг

Что такое клоакинг: техническое определение

Клоакинг (от англ. cloaking — маскировка, прикрытие) — это техника поисковой оптимизации, которая заключается в том, что на один и тот же URL-адрес поисковому роботу выдается один вариант веб-страницы, а пользователю — другой.

Суть этого метода поискового спама проста: создать два варианта контента. Первый — хорошо оформленный, удобный для чтения и полезный для посетителя, который пришел из поисковой выдачи. Второй — технический, предназначенный специально для поисковых систем (например, для алгоритмов Yandex YATI или Google NLP).

Такая страница для роботов, как правило, представляет собой текст, перенасыщенный ключевыми словами и LSI-фразами. Он неудобен для чтения человеком, но его цель — максимально соответствовать релевантности по целевым поисковым запросам и обмануть алгоритмы ранжирования.

Владелец сайта, применяющий маскировку, пытается "усидеть на двух стульях": показать поисковой системе идеально оптимизированный, хотя и нечитаемый материал, а пользователю — красивую страницу, которую, возможно, было бы сложно оптимизировать под требования SEO.

Механизмы идентификации: как сайт "узнает" посетителя

Для реализации клоакинга веб-серверу необходимо научиться различать два типа посетителей: живого человека и поискового робота (паука). Для этого анализируются основные сведения, передаваемые в HTTP-заголовках при каждом запросе к странице.

Анализ по User-Agent

Каждый браузер и каждый поисковый робот при запросе страницы представляется серверу, отправляя специальную строку — User-Agent. Это его "цифровой паспорт". Зная, как представляются краулеры поисковых систем, можно настроить сервер так, чтобы он отдавал им особый контент.

• User-Agent робота Google: Googlebot/2.1 (+http://www.google.com/bot.html)
• User-Agent робота Yandex: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)

Скрипт на сервере проверяет строку User-Agent запрашивающей стороны. Если она совпадает с известным User-Agent'ом поискового робота, ему отдается SEO-оптимизированная версия. Во всех остальных случаях — версия для пользователя.

Фильтрация по IP-адресу

Поисковые системы используют определенные пулы IP-адресов для своих роботов. Эти диапазоны адресов можно собрать и составить из них базу данных. Когда на сайт поступает запрос, сервер проверяет IP-адрес посетителя по этой базе. Если IP-адрес принадлежит поисковой системе, ему отдается скрытый контент. Этот метод считается менее надежным, так как диапазоны IP-адресов могут меняться.

"Белый" и "Черный" клоакинг: где проходит грань?

Крайне важно понимать, что не любая демонстрация разного контента является нарушением. Существуют легитимные методы адаптации, которые поисковые системы приветствуют. Сравнение ниже наглядно демонстрирует разницу между грубой маскировкой и разрешенной персонализацией.

Параметр	Черный клоакинг (Маскировка)	Белый клоакинг (Адаптация)
Основная цель	Обман поисковых алгоритмов для манипуляции результатами выдачи.	Улучшение пользовательского опыта (UX) и предоставление более релевантной информации.
Метод идентификации	Строго по User-Agent или IP-адресу поискового робота.	На основе геолокации пользователя (IP-адрес), языковых настроек браузера (HTTP-заголовок Accept-Language), типа устройства (Mobile/Desktop), данных A/B-тестирования.
Пример реализации	Роботу показывается страница с переспамом ключевых слов, скрытым текстом. Пользователю — обычная страница с графикой и минимумом текста.	Интернет-магазин показывает цены в рублях для пользователей из России и в долларах для пользователей из США. Новостной сайт показывает локальные новости в зависимости от региона.
Реакция поисковых систем	Крайне негативная. Применение санкций (пессимизация, бан). Считается поисковым спамом. Правила Google и рекомендации Яндекса однозначно запрещают такой метод.	Нейтральная или положительная. Такая адаптация ценится, так как делает сайт более удобным для конечного пользователя.

Геотаргетинг и Accept-Language: когда разный контент — это норма

Рассмотрим легитимные способы использования технологий, которые технически напоминают клоакинг, но не являются нарушением.

Геотаргетинг — это определение местоположения отправителя запроса (чаще всего по IP-адресу) для доставки контента, специально созданного для его страны или региона. Например, Google сам активно использует геотаргетинг в своих рекламных программах Google Ads (ранее AdWords) и AdSense для таргетинга на пользователей из разных географических регионов. Это не обязательно является маскировкой.

Однако определение языка пользователя по IP — метод грубый и ненадежный. Пользователь из Германии может быть русскоязычным, и наоборот. Гораздо более хороший метод согласования содержимого — это проверка HTTP-заголовка Accept-Language. Браузер клиента сам сообщает сайту, какой язык является для пользователя предпочтительным, и сервер может отдать страницу на этом языке.

Как обнаружить клоакинг (Чек-лист для аудита)

Если вы подозреваете конкурента в нечестной игре или хотите проверить собственный сайт на случайное срабатывание подобных скриптов, воспользуйтесь этим чек-листом. В таблице ниже мы собрали основные шаги для выявления маскировки.

Шаг проверки	Инструмент	Что ищем?
1. Смена User-Agent	Инструменты разработчика в браузере (F12), расширения (например, User-Agent Switcher для Chrome).	Смотрим на код страницы с обычным User-Agent, затем меняем его на User-Agent робота Googlebot или YandexBot и обновляем страницу. Сравниваем исходный код двух версий.
2. Анализ кеша поисковых систем	Поисковый оператор cache: (например, cache:example.com/page) в Google.	Сравниваем сохраненную в кеше поисковика версию страницы с той, что мы видим, перейдя на сайт напрямую. Значительные расхождения в тексте — тревожный знак.
3. Инструмент проверки URL	Google Search Console (раздел "Проверка URL" -> "Проверить страницу на сайте").	Инструмент покажет, как именно Googlebot "видит" вашу страницу (вкладка "HTML"). Сравниваем этот HTML с тем, что видим в браузере.
4. Использование VPN	Любой VPN-сервис.	Заходим на страницу с IP-адресов разных стран (особенно из США, где расположено много серверов Google). Ищем аномалии, которые могут указывать на гео-клоакинг.
5. Специализированные краулеры	Screaming Frog SEO Spider, Netpeak Spider.	В настройках краулера можно выбрать User-Agent (например, Googlebot) и просканировать сайт. Затем сравнить результаты со сканированием под стандартным User-Agent.

Последствия и санкции за маскировку

Клоакинг относится к "черным" методам SEO и строго наказывается поисковыми системами. Последствия могут быть катастрофическими для любого коммерческого проекта:

• Ручные санкции. Специалист службы поддержки поисковой системы вручную накладывает на сайт фильтр. Снять его можно только после устранения нарушения и отправки сайта на перепроверку.
• Пессимизация. Алгоритмическое понижение позиций сайта по всем или части запросов. Сайт теряет видимость и трафик.
• Полное исключение из индекса. Самая суровая мера. Все страницы сайта удаляются из поисковой базы, и он перестает существовать для поисковой системы.

На моей практике, восстановление сайта после санкций за клоакинг — процесс трудоёмкий и не всегда успешный. Репутационные и финансовые потери от такого поискового спама несоизмеримы с кратковременной выгодой от завышенных позиций.

Заключение: Игра, не стоящая свеч

В современном SEO, где E-E-A-T (опыт, экспертность, авторитетность, достоверность) и пользовательский опыт являются ключевыми факторами ранжирования, клоакинг — это анахронизм. Риски слишком велики, а технологии обнаружения такого обмана у поисковых систем, таких как Яндекс и Google, становятся все более совершенными.

Вместо того чтобы тратить ресурсы на реализацию сложных и рискованных схем маскировки, инвестируйте их в создание качественного контента, улучшение юзабилити и честную поисковую оптимизацию. Это единственный надежный путь к долгосрочному успеху в поисковой выдаче.