Загрузка страниц из Sitemap

[igramnet]

Вот недавно столкнулся с проблемой... В индексе Яндекса 22 тысячи страниц. Код сапы стоит на всех страницах сайта (их вообще более 50 тысяч). Заказал переиндексацию в сапе. В итоге + 10 страниц всего. Я так понял, робот SAPE просто не залазил в дебри сайта (3 уровень вообще плохо индексируется). Вот подумал, а почему бы не сделать такую вещь как, вводишь адрес своих sitemap-ов в сапе. И по желанию самого клиента сапа на переиндексации не ползает по сайту в поисках ссылок, а просто берет по порядку ссылки из sitemap и заходит на них. Если все критерии соблюдены (в Яндексе есть + код найден), то ссылка добавляется в систему. Это, как я думаю, уменьшило бы нагрузку на робота, повысила его эффективность, увеличило бы кол-во хороших страниц в Sape.

А то получается никак сам ссылки не добавишь.

[zhegloff]

Основная функция робота определить УВ страницы.

По вашему сайтмапу этого сделать нельзя ну никак.

[igramnet]

Но как заставить бота найти все страницы?

[RedPage]

Сообщение от igramnet

Но как заставить бота найти все страницы?

А зачем вы пробовали из 5000 найденных сапой страниц через неделю удалить 20 страниц со статусом 404? А тут я щас накормлю сапу 60-тыщами страниц Это я к тому что нет элементарных инструментов облегчить жизнь системе не то чтоб она сама себе ее облегчила.