29 апреля 20254 мин826
Поделиться
Содержание
скрыть
Невидимые клоны: где искать копии сайта, о которых вы могли не знать
Начать стоит с самого очевидного — проверить, какие домены и поддомены индексируются в поиске. Зайдите в Google и Яндекс и выполните несколько запросов:- site:вашдомен.ru
- site:www.вашдомен.ru
- site:http://вашдомен.ru
- site:https://вашдомен.ru
- site:sub.вашдомен.ru
- Полезно также сделать запрос по бренду и имени компании. Иногда можно увидеть зеркала на доменах вроде вашдомен-copy.ru, которые созданы для сбора трафика по названию бренда. Особенно этим грешат серые вебмастера, работающие в арбитраже.
- В Яндексе зайдите в Вебмастер и проверьте, какие зеркала он считает основными и второстепенными. Там может оказаться сюрприз: поддомен, созданный разработчиками для тестов, вдруг оказался основным зеркалом по мнению Яндекса.
Тестовые и технические поддомены — бомба замедленного действия
Когда разработчики поднимают сайт на поддоменах вроде dev.site.ru, stage.site.ru или new.site.ru и забывают закрыть его от индексации — это прямое приглашение поисковикам. Особенно если там размещена почти полная копия боевого сайта. Что делать:- Проверьте наличие robots.txt с Disallow: / для таких поддоменов.
- Поставьте базовую авторизацию или вообще ограничьте доступ по IP.
- Добавьте метатеги robotst с noindex, nofollow.
HTTP, HTTPS и WWW — классическая головоломка
Даже в 2025 году сайты всё ещё умудряются быть доступны по четырём версиям:- http://site.ru
- http://www.site.ru
- https://site.ru
- https://www.site.ru
- Жёсткий 301 редирект со всех вторичных версий на одну основную.
- Указание канонического URL в <head>.
- Настройка одного главного зеркала в панели Вебмастера Яндекса.
- Проверка в Google Search Console: какие страницы индексируются, по каким URL идут клики.
Проксирование, staging и неаккуратные разработчики
В компаниях, особенно с несколькими подрядчиками, бывает, что один из разработчиков поднимает сайт на домене типа client-name.mydevhost.net, чтобы показать результат. В какой-то момент эта версия попадает в индекс. Если такой сайт не закрыт от поисковиков, вы получаете полноценного конкурента себе же. А в худшем случае поисковик решает, что этот домен более релевантный (например, если он работает быстрее, и там нет багов или туда пришел быстробот и быстрее индексирует сайт). Всегда проверяйте staging и тестовые версии:- Закрывайте индексацию сразу при развертывании.
- Удаляйте лишние экземпляры после завершения работ.
- Используйте noindex, nofollow или пароли.
Копии на чужих доменах — как от них избавиться
Если кто-то намеренно создал клон вашего сайта (например, с целью собрать трафик по брендовым запросам), это уже вопрос защиты авторских прав. Порядок действий:- Убедитесь, что сайт действительно использует ваш контент.
- Проверьте, размещены ли ваши тексты дословно — используйте Copyscape, Content Watch или просто фрагмент текста в поиске.
- Направьте жалобу хостеру или в abuse-департамент регистратора домена.
- В случае игнорирования — отправьте DMCA-жалобу в Google.
- Дополнительно можно подать жалобу через Яндекс.Вебмастер на несанкционированное использование контента.
Набор инструментов для аудита
- Google Search Console и Яндекс Вебмастер — для поиска зеркал.
- Screaming Frog и Netpeak Spider — чтобы проверить редиректы и каноникалы, внешние ссылки на сторонние тестовые версии сайта или поддомены.
- Ahrefs, Serpstat или SEMrush — для поиска подозрительных ссылок и копий.
- DNSlytics и SecurityTrails — для анализа поддоменов, IP.
- BuiltWith — иногда помогает найти тестовые окружения и нестандартные субдомены.
- Ручной поиск в поисковой выдаче. Поиск по бренду, ключевым словам, названиям страниц, статей и т.д. Регулярный мониторинг поисковой выдачи.
Резюме для практиков
Каждый лишний дубликат сайта в поиске — это потеря контроля. Каннибализация позиций, снижение CTR, дублирование ссылочного веса и путаница для поисковиков. Даже если всё настроено правильно — стоит раз в квартал делать технический аудит на наличие зеркал и копий. Задача не в том, чтобы устранить всё до последнего байта. А в том, чтобы одна, чёткая, согласованная версия сайта имела приоритет в глазах всех — и людей, и поисковых роботов.
Поделиться
