Как найти клон своего сайта

Сайты-аффилиаты — это попытка «захватить» строчки SERP по целевым запросам. Когда вы пытаетесь вывести сайт заказчика в Топ Яндекса или Google, аффилиаты в поисковой выдаче — это большое препятствие. Такой способ нечестной конкуренции за выдачу не остается без внимания поисковиков.

SEO-специалисту и вебмастеру нужно знать своего врага в лицо и не повторять его ошибок — поэтому в статье разберем, что такое аффилиаты, зачем их создают и как с ними борются Яндекс и Google.

Что такое аффилиаты и аффилированность

Аффилиаты — это сайты, которые появляются в топе выдачи по одной и той же группе запросов. Как правило, их создают, чтобы продвигать свой продукт одной и той же аудитории в поисковике. Если вы заметили схожесть тематики, контента и коммерческих предложений на двух и более сайтах, скорее всего, это аффилиаты.

Распознать аффилированность можно также по совпадению технических параметров, в частности:

• Хостинга ресурса
• Данных о том, кому принадлежит домен
• IP-адреса
• Внешних ссылок
• Наличию взаимных ссылок между ресурсами

Если это сайты конкретной компании, одинаковые контактные данные — тоже признак аффилированности.

Если на двух и более ресурсах совпадает 80% контента — это говорит о том, что он неуникальный. Если добавить к этому наличие общего владельца — зачастую этого достаточно, чтобы назвать сайты аффилиатами.

И крайний случай аффилированности — клоны, или зеркала, или полные дубли. Это сайты, информация и дизайн на которых повторяется точь-в-точь.

Тем не менее часто возникает путаница, где есть аффилированность, а где — нет. Даже поисковики иногда по ошибке принимают вполне безобидные сайты за аффилиаты. Разберем на примерах.

Как определить сайт-аффилиат

Аффилированность по всем пунктам

Однозначно вредны для выдачи Яндекса и Google сайты, если у них один:

• Продукт — например, спортивная брендовая обувь
• Владелец
• Регион в контактных данных

Гео и продукт совпадают — значит, и аудитория тоже. Как правило, обувь покупают всё-таки в оффлайн-магазинах — после примерки и с возможностью увидеть и выбрать нужную модель живьем.

Тоже аффилиаты, но могут показаться не такими

У сайтов один продукт и владелец, а продажи не привязаны к географии. Например, это программное обеспечение и другие digital-продукты + онлайн-продажи.

Хотя здесь целевая аудитория широкая по географии — всё равно она одинаковая для всех сайтов. Ничто не мешает любому человеку купить цифровой товар на любом из таких сайтов.

Руководитель SEOREMICA Павел Михайлов поделился историей, когда магазины с одинаковым адресом склада оказались аффилиатами.

У клиента был склад, куда доставляли партию товаров из Китая. Несколько компаний — интернет-магазины без физического офиса — из похожей ниши указали одинаковый адрес. Тематика — интим-бутик. Комично, конечно, что у них склад общий, и всё из Китая.

Организации разные, но аффилирование было с двумя сайтами и больше. Возможно, поисковик посчитал их сеткой. В итоге клиент закрыл сайт. Я его консультировал по перспективам, он решил, что не выгодно ему.

Павел Михайлов, руководитель SEOREMICA

Некоммерческие аффилиаты

Некоммерческие сайты тоже грешат аффилированностью, не всегда злонамеренно. Если у сайтов с общей тематикой совпадает владелец и частично текст — это признак аффилированности.

Теперь — случаи, когда группа сайтов имеет некоторые признаки аффилированности, но по сути не является аффилиатами.

«На грани» аффилированности

У сайтов совпадает продукция и регион в контактах, но разные владельцы.

Когда поисковому алгоритму по кластеру запросов попадаются два сайта, которые предлагают одно и то же, он может принять их за аффилиатов. Такое случается на практике, но это будет ошибкой, потому что две самостоятельные организации с одинаковой продукцией — обычное дело.

Сайты с продуктом определенного бренда принадлежат дистрибьюторам, которые работают с одним и тем же производителем. Даже если они ориентируются на пользователей из определенного города — это прямые конкуренты, каждый из них — самостоятельная компания.

Тем не менее, чем сильнее два и более отдельных сайтов схожи по наполнению и оформлению, тем выше риск «нарваться» на санкции по аффилированности.

Пример от Павла Михайлова, руководителя SEOREMICA.

Сайт клиента по тематике «Металлолом» оказался по мнению Яндекса аффилиатом с сайтом конкурента из-за того, что сменился адрес главного офиса. Офис переехал в тот же бизнес-центр, где уже размещался этот самый конкурент — отличие всего в цифру. В контактах еще и адреса площадок пересекались. К счастью, в течение 2 месяцев вопрос об отсутствии аффилированности удалось решить с помощью письма в техподдержку.

Не аффилиаты, а филиалы по регионам

Когда брендовые товары продаются на нескольких сайтах, на первый взгляд они принадлежат хозяину этого бренда. По факту они принадлежат дилерам из нескольких регионов. Сколько их — столько и сайтов, а раз регионы различаются, значит, и контакты, и потенциальные клиенты у каждого свои.

Так как Яндекс показывает каждый из сайтов в топе выдачи только по нужному геоположению — под каждую аудиторию свой отдельный сайт.

Не аффилиаты, а сайты по направлениям бизнеса

Не являются аффилиатами и сайты, которые они предлагают разные группы товаров и услуг. Исходя из того, что товары различаются — аудитория тоже, даже если география совпадает, покупательские цели различаются.

Логично распределить источники трафика с разными намерениями по отдельным сайтам. Алгоритм Яндекса помещает в выдачу по поисковому запросу только тот сайт, который соответствует тематике и намерению — купить, изучить, оставить заявку, почитать отзывы и т.д.

Итак, «злые» аффилиаты — это всегда группа сайтов с одинаковым владельцем, контентом и для одинаковой аудитории.

Далее под аффилиатами мы подразумеваем именно «злых» аффилиатов, которые вредят конкурентам по поисковой выдаче и которых «не любят» ни поисковые системы, ни пользователи.

Как появляются аффилиаты и по какой схеме работают

Это группа сайтов, на каждом из которых вебмастер размещает партнерские внешние ссылки, по которым посетитель сможет перейти на основной сайт и сделать там покупку или совершить другое целевое действие.

Когда человек ищет в Интернете, допустим, обувь определенного бренда, аффилиаты в топовых позициях вводят в заблуждение, что по определенной тематике есть только их продукт — и ничего больше. И это удается, так как если страницу SERP заполонили сайты-клоны, конкуренты туда просто не попадают. Пользы от такого расклада для пользователей — ноль.

Сайты с осознанной аффилированностью играют не по правилам конкуренции, захватывают внимание в выдаче Яндекса и Google и забирают право выбора у пользователей, лишают возможности найти что-то релевантное и свежее по нужным запросам. Это относится не только к коммерческим ресурсам, но и информационным.

Смысловые дубли перекрывают кислород по-настоящему полезным материалам и занимают их позиции в топе выдачи. Естественно, такое поведение противоречит принципам и Яндекса, и Google — поэтому поисковики всячески стараются его выявить и пресечь. В лучшем случае, сайт, которые бесполезен для людей, исключают из выдачи по конкретным группам запросов, в худшем — накладывают фильтр.

Далее рассмотрим, на что обращают внимание поисковые системы, когда проверяют сайты на аффилированность, и какие санкции применяют.

Спойлер: ни Яндекс, ни Google не используют в справках для вебмастеров само понятие «аффилиат», «аффилированность». Отсюда сложности с выявлением аффилиатов.

Как Яндекс проверяет и банит аффилиаты

Для отечественного поисковика аффилиаты — это прежде всего группа сайтов одного человека или компании. Алгоритмы применяют аффилиат-фильтр, в результате чего в выдаче по запросу показывается сайт, по мнению Яндекса, подходящий по смыслу. Либо наложить фильтр могут вручную в ответ на жалобу конкурентов в техподдержку Яндекса.

Как Google проверяет и банит аффилиаты

Google поясняет в справке вебмастерам, что некачественные партнерские сайты не дают ценности пользователям, так как те видят идентичные ресурсы в топе выдачи и не находят нужной информации в ответ на свой запрос. Характеристики таких ресурсов — неуникальность контента, низкая ссылочная масса.

Решение поисковика — понизить сайты-клоны в выдаче или совсем скрыть, то есть поместить в дополнительный индекс Google. Это происходит каждый раз, когда вы видите такое сообщение внизу страницы выдачи:

Посетители до таких ссылок практически не доходят, и вообще 99% внимания достается первым 3-5 результатам выдачи, особенно если речь о коммерческом контенте.

Как проверить, есть ли у вашего сайта клоны

Это важный этап перед тем, как начать продвигать новый сайт в поисковике. Любые похожие ресурсы могут стать препятствием на пути в топ выдачи Яндекса и Google, поэтому лучше найти их в начале, чтобы сделать сайт по максимуму уникальным и избежать проблем с аффилированностью.

Перечислим доступные способы поиска аффилированности.

Анализ позиций сайта

Если страницы сайта появляются в поисковике по нужным кластерам семантики, но позиции сильно упали в выдаче — это признак, что сайт, скорее всего, под фильтром.

Проверять позиции в выдаче по запросам — хоть и трудозатратный способ, но он позволяет выявить первые признаки наличия клонов.

Определение «сильного» клона

Если вы знаете, какие именно два сайта склеили и они присутствуют в выдаче, подойдет этот способ. Он помогает выяснить, какой из ресурсов показывает Яндекс в результатах поиска по кластерам семантики.

Вбиваете в Яндексе URL-адреса с оператором ИЛИ — и видите, какой из них у поисковика в приоритете.

Проверка уникальности текстов

Чтобы узнать, нет ли в Интернете точь-в-точь такого же сайта, можно скопировать текст страниц и проверить на уникальность, например, в сервисе text.ru или advego.com.

Также можно использовать оператор intext для поиска идентичных фрагментов текста прямо в поисковике. Этот способ называется футпринты.

Как не попасть под фильтр по незнанию

Если поисковик всё-таки посчитал несколько ваших сайтов аффилиатами другого сайта, можно попытаться «расклеить» ресурсы — обновить контактную информацию, содержимое, дизайн, сменить хостинг, управлять сайтами из разных панелей вебмастера и Яндекс.Метрики или Google Аналитики.

Еще долгий способ — разделить семантику сайтов, чтобы продвигать каждый по конкретным кластерам запросов. Либо можно удалить один клон и с нуля попробовать создать новый, если так проще для вебмастера.

Даже если всё в порядке, советуем отстраиваться от конкурентов по максимуму, чтобы не попасть под санкции по ошибке, и использовать другие каналы трафика: соцсети, отзовики, отраслевые справочники и т.д.

Бывают случаи, когда поисковики ошибаются и принимают ресурсы за аффилиатов, например, из-за IP-адреса.

На каждом IP-адресе хоста располагаются от 25 сайтов. Бывают совпадения, когда две компании случайно попадают на один адрес — и это тоже возможная причина аффилированности и применения фильтра.

Павел Михайлов, руководитель SEOREMICA

Заключение

Аффилиаты — не способ охвата потенциальных клиентов благодаря сразу нескольким источникам заявок, а мошенническая схема черного SEO-продвижения.

За попытку монополизировать страницу SERP поисковые системы либо склеивают похожие ресурсы и выбирают для показа какой-либо из них — не всегда тот, который нужно вебмастеру, либо банят всю сетку без возможности восстановления.

Если у вас несколько ресурсов с похожей семантикой, стоит проверить на аффилированность — у аффилиатов возможно совпадение по параметрам:

• Контактная информация — город, телефон, email
• Текст и описание продуктов и коммерческих предложений
• Дизайн
• Данные в сервисе Whois
• IP-адрес сервера, на котором находится ресурс
• Взаимные ссылки между предполагаемыми аффилиатами

Если несколько ваших ресурсов всё-таки попали под фильтр, попробуйте либо их «расклеить» с помощью обновления текстов, оформления и контактов, либо удалить один из них и создать новый с нуля, но он должен быть отличным от старого. Иначе из-за аффилированности затраты на бизнес, в том числе на продвижение сайта — сливаются в трубу.

Безопасность вашего сайта, или о пользе копирайта разработчика

Раз в две недели мы открываем «Яндекс.Вебмастер» и просматриваем новые ссылки на наш сайт, которые появились в индексе.

Мы занимаемся разработкой сайтов, в основном e-commerce с разнообразными интеграциями. И изначально завели эту практику в студии, т.к. тексты с нашего сайта и просто его клоны постоянно всплывали в интернете. В наших текстах много перекрестных ссылок, которые плагиаторы забывали убрать, и которые индексировались. Сейчас эта эпидемия почти прошла, но появилась другая проблема, гораздо более серьезная.

Уже несколько лет распространено следующее мошенничество: создается полная копия популярного интернет-магазина, меняются только контакты и способы оплаты. После чего пользователям вместо настоящего магазина предлагается “доработанный”.

Обычно такие копии делаются не без участия нечистых на руку сотрудников самого же магазина или хостинга.

Как клоны воруют ваших клиентов

Есть три варианта:

Первый. На сайте делаются и оплачиваются покупки. Деньги уходят кому надо. А настоящий продавец про это не знает, пока не начинает получать претензии от покупателей, которые не получили свои заказы.

Второй. Деньги с покупателей не списываются, заказы не оформляются, но собирается база персональных данных тех, кто пробовал заказать товар. В том числе логинов и паролей. И ладно бы только от настоящего магазина, многие пользователи используют одинаковую пару логин-пароль на многих ресурсах. Так магазин теряет и новые заказы, и старых лояльных клиентов.

Третий. Самый безобидный для пользователей, но не для магазина, вариант. Лиды воруют, а заказы обрабатываются по-настоящему, но только другой компанией. Нам так кофе в офис однажды месяц возили не от того поставщика.

Если первый вариант еще можно довольно быстро отследить, т. к. люди, не получившие свой заказ, умеют ставить всех на уши, то со вторым и третьим — можно месяцами терять ощутимую долю заказов и не знать об этом.

Как найти мошенников и что с ними делать

Так вот. При очередной проверке внешних ссылок на наш сайт, мы нашли клон сайта одного из наших клиентов. Просто потому, что в подвале разработанных нами сайтов мы ставим свой копирайт. Ставим копирайт не поэтому, если что 🙂 При клонировании сайта он, ожидаемо, остается — про такие мелочи никто не думает. Через пару месяцев нашли еще один, уже другого клиента.

При попадании такого клона в поисковый индекс мы максимум в течение пары недель увидим его в списке ссылающихся на сайт студии сайтов.

Как проверить сайт-клон, чтобы вычислить его хостера и владельца домена.

Через домен

Есть такая штука, как WHOIS — это протокол, назначение которого — получать регистрационные данные о владельцах доменов, IP-адресов и автономных систем.

Далее следуйте алгоритму:

1. зайдите на любой онлайн whois-сервис (например, Ru-сервис или 2whois);

2. введите подозреваемый домен и присмотритесь в полученную информацию:

3. обратите внимание на те поля, где указаны контактные данные владельца или регистратора домена. В нашем случае — это поля «person» и «admin-contact».

Что делать: писать владельцу домена с требованием снять клон вашего сайта с домена. Не помогло? Тогда нотариально заверяете скриншоты сайта и идете в суд.

Через хостинг

Для начала необходимо узнать IP сайта-клона с помощью NSLOOKUP — утилиты, которая обращается к системе DNS и запрашивает IP-адрес сайта по его домену (например, как это делает 24whois).

Для этого:

1. введите домен и выберите тип записи — A;

3. заберите полученный IP-адрес (на примере в скрине 88.99.94.166);

4. переключитесь на вкладку WHOIS и вводим IP-адрес и обратите внимание на поля с контактной информацией.

Что делать: вам нужны любые поля с информацией о хостере. На примере — это «Abuse contact» с контактом хостера для жалоб, или поля от «role» и ниже, где указаны название хостинга («Hetzner Online GmbH»), резиденция, адрес и е-мейл для жалоб. Если есть только имя хостера, то найдите его сайт и форму жалобы на нем.

К сожалению, проблема — массовая, клоны мы находим регулярно. Но только у тех сайтов клиентов, где есть наш копирайт.

Клонируют очень многих. Дело в том, что это не так сложно и за дело взялись даже школьники, ничего не понимающие в сайтостроительстве. Поисковые системы более менее научились обнаруживать клоны (идентичные дубли сайтов) и игнорировать их, но не всегда все происходит гладко, как хотелось бы.

В статье “Если вы обнаружили полный клон своего сайта в интернете” мы рассмотрели теорию создания клонов сайтов. Далее, я показал на примерах (см. “Удаляем клоны своего сайта из индекса ПС”)  как бороться с клонами и заблокировать клоны в поиске. Потом был шквал почты, комментариев, даже просьбы помочь платно с данным вопросом (следует учитывать, что не все люди разбираются в кодах). В ходе такого обсуждения появились новые неучтенные вопросы, на которые хотелось бы ответить в рамках этой статьи, чтобы сэкономить свое и Ваше время. Диалог о том, как побороть клоны сайтов, мы построим в форме вопросов-ответов:

Как узнать, что сайт клонировали

Клоны сайтов можно найти в поиске. Можно воспользоваться операторами поиска Google для уточняющего поиска. Например:

intitle:Если вы обнаружили полный клон своего сайта в интернете

Оператор intitle находит страницы, в заголовке (title) которых есть интересующее нас словосочетание, в нашем случае это название статьи «Если вы обнаружили полный клон своего сайта в интернете» целиком.

Наиболее эффективным оператором служит inurl. Он находит сайты или страницы, которые имеют в URL искомый URL. Вот как искать по ссылкам со своим сайтов (пример):

inurl:/esli-vy-obnaruzhili-polnyj-klon-svoego-sajta-v-internete-2017-02-21.html

Сайты (в результатах поиска) у которых будет идентичный URL наверняка Вас склонировали или скопировали.

Еще один хороший способ найти клоны Вашего сайта – Яндекс.Метрика (если она установлена на сайте), перейдите по пути:

Отчеты - Стандартные отчеты - Содержание - Страницы входа (выберите период ГОД)

Какой код разместить на сайте чтобы с клона был редирект на сайт-оригинал

В область <head>…</head> на своем сайте (который склонировали) вы можете вставить следующий код:

<script>if("ваш-"+"сай"+"т.ru"!==document.domain){
document.write('<meta http-equiv="refresh" content="0; url=https://ваш-с'+'айт.ru">');}</script>

или в любое место (но желательно ближе к верху):

<script>var $url = "ваш-" + "сай" + "т.ru"; if ( $url !== location.host) {location.href = 'http://' + $url;}</script>

Данный код проверяет, принадлежит ли загруженная страница сайту “ваш-сайт.ru”. Поскольку это будет “klon.ru”, то сработает редирект на “ваш-сайт.ru”

На какие части разбивать домен: “ваш-“+”сай”+”т.ru”

Не важно на сколько частей вы разбиваете домен, также нет никакой логики. Вы должны разбить целое название своего сайта на случайные части, поскольку скрипт клона ищет в тексте ваш домен и заменяет на лету на свой. Разбитый на части домен он не сможет прочитать! Примеры:

"ваш-"+"сай"+"т.ru"
"ва-"+"шсайт"+".ru"
"в-"+"фшс"+"айт"+".ru"
"в"+"а"+"ш-"+"са"+"й"+"т.r"+"u"

Как проверить корректность размещенного кода

Вполне возможно у Вашего сайта нет “дубликатов” и код Вы размещаете на своем сайте в целях профилактики, то есть – у Вас нет возможности проверить работоспособность кода на практике.

Как проверить работу размещенного кода на практике?

После размещения кода на сайте, нужно воспользоваться анонимайзером, например:

http://cameleo.xyz
http://noblockme.ru

Откройте в анонимайзере свой сайт. Если код вы разместили корректно, то анонимайзер (в нашем случае – эмулятор клона) должен средиректить на Ваш сайт (проверьте урл в адресной строке браузера).

Я разместил код, он работал (редиректил), но вскоре исчез с клона

Скорее всего, злоумышленник его обнаружил у себя на сайте и вырезает его. Очень часто они вырезают <script>…</script> или даже строку целиком. Можно модифицировать скрипт, например:

<ScRipT>var $url="ваш-сайт.ru"; $url!==location.host&&(location.href="http://"+$url);</sCRIPt>

Или не размещать скрипт в теле страницы, а разместить его в любой файл JS, который загружается на вашем сайте (откройте любой используемый файл JS вашего сайта и вставьте в самый конец с новой строки):

var $url = "ваш-" + "сай" + "т.ru"; if ( $url !== location.host) {location.href = 'http://' + $url;}

Как сделать переадресацию с клона на ту же самую страницу оригинального сайта

Возможно, вы захотите перенаправлять посетителей с клона именно на ту страницу, которую посетил пользователь, а не на главную страницу домена? Код можно модифицировать следующим образом:

<script>var $url = "ваш-" + "сай" + "т.ru"; if ( $url !== location.host) {location.href = 'http://' + $url + location.pathname;}</script>

Как собрать информацию о своих клонах и переходах с клонов в Яндекс.Метрике

Вы можете добавить метку (как пример ?utm) и позднее отслеживать все переходы с этой меткой в Яндекс.Метрике:

<script>var $url = "ваш-" + "сай" + "т.ru"; if ( $url !== location.host) {location.href = 'http://' + $url +'?utm='+ location.host;}</script>

Почему скрипт не срабатывает на кириллических доменах

Для кириллических доменов необходимо учитывать в скрипте оба варианта написания домена (в том числе и в Punycode – конвертер пуникоде), только в таком случае гарантируется работоспособность защиты против клонов:

<script>var $url1 = "ваш-"+"сай"+"т.ru"; var $url2 = "xn--"+"--7sbbf"+"2b7bj"+"7b.xn--p1af"; if ($url1!= location.host && $url2!= location.host) {location.href = 'http://' + $url2;}</script>

Код не появился на клоне после размещения на оригинале

Это значит, что клон кеширует данные с Вашего сайта с определенной периодичностью. Чтобы убедиться в этом, откройте любую заведомо несуществующую страницу на клоне, например /jkajkjhfkllk.html Если в коде такой новой страницы появился ваш код, с большой вероятностью можно утверждать, что вскоре он появится на всех страницах клона (после очистки страниц кеша).

Бывают и случаи, когда клон не самообновляется больше с сайта-оригинала. Как быть в такой ситуации: как разместить код редиректа в таком случае?

Один из вариантов – изучить дерево загрузки клона. Нажмите Ctrl+Shift+C на клавиатуре или Посмотреть код элемента в меню правой кнопкой мыши на странице клона. Перейдите во вкладку Network – отфильтруйте JS (возможно придется нажать F5). Внимательно изучите: не тянет ли клон какой-либо JS файл с вашего сайта (а часто так и бывает)? Если JS подгружается с сайта оригинала, то смело вставляете код редиректа в этой файл и редирект с клона заработает! Не забудьте очистить кеш браузера!

Чем длиннее и сложнее название вашего сайта, тем больше вероятность того, что пользователь введет его в строку поиска с ошибкой. Двойные буквы, точки в середине названия, дефис и т.д. – именно на этих опечатках могут заработать конкуренты.

Для этого они регистрируют ошибочные домены, похожие на ваш, и делают с них редирект на свой сайт, тем самым забирая трафик. Конечно же, такой метод не подействует на ваших постоянных клиентов, у которых наверняка сайт в закладках. Но для новых пользователей все пройдёт «идеально».

Также хитрые вебмастера используют данный метод для заработка в CPA-системах, добавляя к ссылкам свои партнерские метки и тем самым получая комиссию за заказ. Создается иллюзия, что клиент привлечен честным путем.

Можно возразить, что поисковики исправляют опечатки, но в основном это работает для известных брендов, поэтому надеяться на них не стоит.

Давайте разберемся, как же защитить свой домен от кражи трафика.

1. Выбираем простое доменное имя

Для тех, кто только планирует создавать сайт, это легко. Но что делать тем, чей сайт работает не первый год? Оцените, насколько сложно название вашего сайта, а лучше опросите друзей не из вашей сферы – легко ли им его запомнить. Если большинство не смогло правильно прочитать домен с первого раза, то лучше сменить название, тем самым упростив жизнь себе и новым клиентам. Также в принятии решения поможет данная статья.

Основные рекомендации к выбору доменного имени:

• Используйте для домена латинские буквы, чтобы не возникало проблем с кодировкой при копировании ссылки на сайт.
• Название должно отражать тематику услуг или товаров – divan.ru, moemokna.ru, dizainkvartir.com и др.
• Домен должен быть кратким и легкозапоминающимся, например, запомнить iglabitrix.maximglv.beget.tech – сложная задача. =)
• Нужно избегать неоднозначных звукосочетаний, для которых существует несколько транскрипций, например, букву «я» на латинице можно записать как «ya» или «ia».
• Выбирайте доменную зону первого уровня и (в идеале) выражающую региональную принадлежность (.ru, .ua, .com и т.д.).

Ну и, конечно же, домен должен быть свободным. Для проверки используйте Whois-service:

О том, как правильно и без потерь переехать на новый домен, можно узнать здесь.

2. Составляем список ошибочных доменов и ищем копии сайта

Тем, у кого и так простой адрес сайта или нет желания менять имеющийся, следует запастись терпением и смекалкой, потому что придется вручную перебирать ошибочные домены. Рекомендуем задерживаться на каждом сайте по 5-7 секунд на случай, если редирект срабатывает не сразу. Составьте два списка: с занятыми и свободными доменами.

Чтобы эффективнее найти копии сайта, вот список типичных ошибок, которые совершают пользователи при вводе домена:

• Забывают поставить точку после www и получается wwwsite.ru.
• Пропускают/удваивают буквы.
• Могут забыть или, наоборот, добавить дефис в домены, состоящие из двух и более слов.
• Для длинных доменов могут поменять местами слова.
• Если домен находится на малораспространенной зоне, например, tech, ly, info, org и т.д., то могут «по привычке» вводить ru или com.
• Буквы «в, ж, й, с, х, ц, ч, ш, щ, ы, ю, я» часто по-разному переводят на латиницу, например, для «ю» есть варианты «iy», «iu» и «u». Попробуйте каждый.
• Слова на латинице могут перевести на английский язык, например, домен sport-grup, можно заменить на правильный (с точки зрения английского языка) sport-group и, наоборот.
• Вводят комбинации вышеперечисленного.

Поиск копий сайта может затянуться, поэтому подключайте коллег, чтобы быстрее генерировать ошибочные домены.

3. Используем список свободных доменов

Как вы, наверное, уже поняли, необходимо приобрести свободные домены и зарегистрировать их на себя, чтобы никто не смог их забрать. Понимаем, что дело затратное, но тут все зависит от вас. Так вы уж точно защититесь от мошенников.

Для каждого домена нужно настроить редирект на основной адрес сайта. Подробнее о редиректах и их настройке »

4. Работаем со списком занятых доменов

Если среди ошибочных доменов нашлись сайты с похожим на ваш контентом или полной копией, то кто-то уже крадет ваш трафик.

Для начала проверьте с помощью приведенного выше сервиса, когда зарегистрированы сайты. Если они созданы раньше, то, скорее всего, они случайно совпадают по тематике и тут придется искать другие способы борьбы с конкурентами (например, запустить контекстную рекламу).

Для доменов, зарегистрировавшихся позже вас, смотрим хостинги, на которых они размешены или регистраторов доменов. Затем пишем в службы поддержки с просьбами заблокировать сайты-копии. Чаще всего компании идут навстречу. Ещё можно написать в службу поддержки Яндекса и Google.

Также попробуйте написать владельцам доменов (если они указали свои контактные данные), но вряд ли они будут вам отвечать.

Заключение

Не расстраивайтесь, если не удастся удалить все копии и останутся адреса, на которые уходит часть трафика. По крайней мере, вы сократили их количество и теперь знаете врага в лицо. Один наш клиент просто продолжил борьбу другим способом.

Постоянно обновляйте контент, проводите акции, размещайте новые товары/услуги и тогда конкуренты не будут успевать поддерживать свою копию, а клиенты заметят разницу при переходе не на тот сайт.

dr.gopher

Приватовец

Приватовец

VIP

Прошёл марафон

Регистрация

23 Фев 2017

Сообщения

411

Реакции

130

Баллы

43

• 

• #1

В очередной раз обнаружил клон своего сайта.

Решил поделиться алгоритмом, дабы давить их гадов. )))

1. Поиск клона.
Периодически проверяйте старые тексты на уникальность. Я проверяю тут https://text.ru
Как правило, появляется сайт со 100% совпадением текста.

2. Определение IP. Как правило клоноводы прячут сайты за https://www.cloudflare.com
Но мы их достанем и там. ))

– Выбираем новость с малой посещаемостью на своем сайте
http://site.ru/1254-svet-v-okeane.html

– Заходим на клон в эту же новость.
http://clon.gandon/1254-svet-v-okeane.html

– Грепаем лог файл ( команда grep ) зайдя на сервер по ssh, проявляя активность на страничке клона http://clon.gandn/1254-svet-v-okeane.html

tail -f /var/log/apache2/domains/site.ru.log | grep 1254-svet-v-okeane.html

– Находим IP клоновода в лог файле

3. Блокируем IP в админ панели Vestacp

Все!

aeneas

Новичок

Регистрация

27 Фев 2017

Сообщения

2.974

Реакции

1.352

Баллы

113

• #2

спс )) щас почекаю казлоф ))

Marques

Новичок

Регистрация

27 Фев 2017

Сообщения

218

Реакции

87

Баллы

28

• #3

норм, владелец киного воспользуется

aeneas

Новичок

Регистрация

27 Фев 2017

Сообщения

2.974

Реакции

1.352

Баллы

113

• #4

норм, владелец киного воспользуется

бздишь чтоли ? тексты у него пиздишь ? )

Marques

Новичок

Регистрация

27 Фев 2017

Сообщения

218

Реакции

87

Баллы

28

• #5

бздишь чтоли ? тексты у него пиздишь ? )

только уник только хардкор
и да, клонов киного у меня нету

aeneas

Новичок

Регистрация

27 Фев 2017

Сообщения

2.974

Реакции

1.352

Баллы

113

• #6

только уник только хардкор
и да, клонов киного у меня нету

winter

Новичок

Регистрация

13 Июн 2017

Сообщения

1

Реакции

0

Баллы

1

• #7

Спасибо за совет, будем пробовать

dr.gopher

Приватовец

Приватовец

VIP

Прошёл марафон

Регистрация

23 Фев 2017

Сообщения

411

Реакции

130

Баллы

43

• 

• #8

только уник только хардкор
и да, клонов киного у меня нету

Речь идет о клонах не по шаблону и доменному имени, а о скриптах которые создают зеркало твоего сайта на другом домене. Все изменения которые ты делаешь на своем сайте, происходят и там. Скрипт просто смотрит на твой сайт и показывает его на своем домене. Как iframe.

Последнее редактирование: 15 Фев 2018

Регистрация

13 Мар 2017

Сообщения

207

Реакции

57

Баллы

28

• 

• #9

А как быть с теми, кто тексты тырят? Проверил, на некоторые фильмы они выше меня стоят

dr.gopher

Приватовец

Приватовец

VIP

Прошёл марафон

Регистрация

23 Фев 2017

Сообщения

411

Реакции

130

Баллы

43

• 

• #10

А как быть с теми, кто тексты тырят? Проверил, на некоторые фильмы они выше меня стоят

Подниматься выше них. )))
И тырить у них тексты.

Marques

Новичок

Регистрация

27 Фев 2017

Сообщения

218

Реакции

87

Баллы

28

• #11

@dr.gopher, и что толку от того что зеркалят твой сайт? если сайт нормальный вообще не стоит заморачиваться, материалы будут почти мгновенно индексироваться, и уж точно будут выше какого то безымянного дора скопированного с оригинала

Chingis

Модератор

Команда форума

Приватовец

Прошёл марафон

Регистрация

21 Фев 2017

Сообщения

336

Реакции

153

Баллы

43

• #12

и уж точно будут выше какого то безымянного дора скопированного с оригинала

как показывает практика, очень часто такое зеркало выше оригинала….

Den

Приватовец

Приватовец

VIP

Прошёл марафон

Регистрация

23 Фев 2017

Сообщения

1.076

Реакции

549

Баллы

113

• #13

@Marques, это из того разряда, когда делаешь два абсолютно одинаковых сайта, но только тексты разные. Один стреляет, а второй нет. У таких клоноводов ставка на это же — их сайт может стрельнуть и затмить донора.

dr.gopher

Приватовец

Приватовец

VIP

Прошёл марафон

Регистрация

23 Фев 2017

Сообщения

411

Реакции

130

Баллы

43

• 

• #14

как показывает практика, очень часто такое зеркало выше оригинала….

Что за скрипт, может ты в курсе?

Chingis

Модератор

Команда форума

Приватовец

Прошёл марафон

Регистрация

21 Фев 2017

Сообщения

336

Реакции

153

Баллы

43

• #15

Что за скрипт, может ты в курсе?

неа не вкурсе, но видел много таких клонов..

dr.gopher

Приватовец

Приватовец

VIP

Прошёл марафон

Регистрация

23 Фев 2017

Сообщения

411

Реакции

130

Баллы

43

• 

• #16

@dr.gopher, если сайт нормальный

Это критерий скользкий как у психиатров…. ))

@dr.gopher, и уж точно будут выше какого то безымянного дора скопированного с оригинала

Почему ты решил, что дор безымянный?
Да, и как показала практика, некоторых текстов с моего сайта нет в индексе, а вот клон есть. ))

Marques

Новичок

Регистрация

27 Фев 2017

Сообщения

218

Реакции

87

Баллы

28

• #17

нет
объяснять и спорить желания нету) всем peace

Регистрация

21 Фев 2017

Сообщения

147

Реакции

63

Баллы

28

• 

dr.gopher

Приватовец

Приватовец

VIP

Прошёл марафон

Регистрация

23 Фев 2017

Сообщения

411

Реакции

130

Баллы

43

• 

• #19

Последнее редактирование: 15 Фев 2018