Решение для автоматической проверки ссылок :)
http://yandex.ru/yandsearch?date=&te...&ds=&numdoc=50
могу утверждать, что все эти ссылки проиндексированы яндексом. :) Достаточно пройтись по страницам выдачи и получить список страниц. Соответственно не надо сервер сапы напрягать самостоятельной индексацией. кстати, именно так я проверял на своих страницах - сграбил 20 страниц яндексовской выдачи, выбрал уникальные адреса, отметил их в интерфейсе сапы и принял, а остальные тупо удалил. PS: решил сделать так как описал, после того как увидел, что мои 1000 ссылок YCCY будет проверять часа три и сожрет кучу траффика |
Что-то подобное работает тут
http://ya-cache.net.ru Проходит страницы выдачи и собирает ссылки на страницы сайта |
именно это я и имел в виду :)
вот только по ссылке ограничение в 5000, а если немного подумать и сегментировать запрос по времени, то можно вообще все выцепить |
Цитата:
аналогично реализовал и у себя, теперь гемор с проверкой страниц отпал а то доставало извечное рытьЁ проксей |
Часовой пояс GMT +3, время: 22:57. |
Работает на vBulletin® версия 3.8.7.
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
Перевод: zCarot
SAPE.RU — система купли-продажи ссылок с главных и внутренних страниц сайтов.