RDS - Определить зеркала сайта по Яндексу (>400 000 обновляемых зеркал)

[RDS bar]

Команда RDS рада представить новую услугу - Поиск дополнительных зеркал сайта по Яндексу.

Склеен ли сайт на какой-то другой можно определить используя эти два запроса:
http://search.yaca.yandex.ru/yca/cy/ch/site.ru/ или http://bar-navig.yandex.ru/u?ver=2&u...ndex.ru&show=1

Если какое-то из этих значений возвращает склейку, то этот сайт попадает к нам в базу.
Определить склеен ли сайт - очень просто. А вот узнать какие сайты приклеены к данному, то есть произвести обратную процедуру - довольно сложная задача.
Для этого "в идеале" нужно проанализировать все сайты интернета на эти два запроса проверки склейки и создать связки для склееных сайтов.
Что позволит найти все зеркала сайта, если они действительно приклеены к данному сайту.

В нашей базе более 13 млн. сайта, которые регулярно проверяются на данные параметры.
Из статистики, найдено:
406 000 сайтов склееных на другие
280 000 сайтов у которых есть дополнительные зеркала.

На сегодняшний день мы можем утверждать, что собираем наибольшую (из открытых данных) базу склееных сайтов по Яндексу, после самого Яндекса


Для чего это нужно?

- Полезен при покупке сайтов (не попасть на фейковый тиц, определить откуда тиц сайта без обратных ссылок)
- Для анализа сайтов конкурентов (история кочевания сайта, анализ беков зеркал сайта, регистрация дополнительных созвучных доменов)

Откуда появляются дополнительные зеркала сайта?

- Сайт переехал над другое доменное имя, то есть на другой адрес. На старом или стоит редирект на новый или в robots.txt прописано новое главное зеркало или Яндекс сам определил дубликаты контента и склеил эти сайты.
- Для наращивания тиц некоторые вебмастера покупают нерабочие домены с параметрами и за счет редиректа склеивают авторитетность со своим сайтом. Или спамом продвигают другой домен, а после склеивают их, тем самым анализируя беки основного домена не видны беки зеркал.

Как проверить?

- На сайте http://www.recipdonor.com/info/
- Или установив плагин RDS bar - в случае нахождения зеркал у сайта параметр "тИЦ" подсветится красным цветом.
- Если нужно проверить большое кол-во сайтов на приклееные тиц, тогда можете воспользоваться сайтом http://www.recipdonor.com/. Добавив ресурсы, например, в раздел "Библиотека сайтов" вы получите подобную картину.

Внимание: сервис определяет зеркала для сайтов, которые Яндекс признал действительно зеркалами и склеил их.
Определение зеркал по Google или по другим признакам (у которых в robots.txt прописано или стоит редирект, или на сайте просто надпись сайт переехал) - это другая история.

Подробнее что такое зеркало сайта help.yandex.ru, seonews.ru, ru.wikipedia.org
Подробнее о определении зеркал сайта по Google и с помощью других проверок martikus.ru