ЯВМ: страницы не в поиске
На одном сайте количество страниц, участвующих в поиске, составляет 30% от всех загруженных роботом страниц. Можно ли как-нибудь выцепить из ЯВМ эти страницы?..
|
а через расширенный поиск по яндексу не пробовали? http://yandex.ru/search/advanced
вводите в графе "на сайте" свой адрес и вам покажет все страницы в поиске |
zadnica, все страницы в поиске я и так знаю. Мне нужны те страницы, которых в поиске нет, но про которые Яндекс говорит, что роботом он их себе загрузил...
Вот про эти: Цитата:
|
ну так смотрите какие страницы в поиске и делайте вывод, что остальные не в поиске. при том если сайт обновляется исключаете еще и те страницы, которые были созданы после последнего апа
|
zadnica, а если их стотыщмильонов? К тому же, не хочется тратить время на воспоминания - какие-то разделы могли быть запрещены в роботсе. Причем не в файле роботс.тхт, а в метатеге роботс...
|
ну то что их так много я сомневаюсь. ну впрочем другого способа предложить не могу.
|
можно выгрузить логи сервера до даты, указанной в вебмастере как последняя дата индексации. Создать консолидированный список урлов, которые яща читал и вычесть те, которые в поиске.
Такой способ лучше? |
И кстати единственный!!
|
*ошарашенно*
thx... |
Часовой пояс GMT +3, время: 20:22. |
Работает на vBulletin® версия 3.8.7.
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
Перевод: zCarot
SAPE.RU — система купли-продажи ссылок с главных и внутренних страниц сайтов.