сколько стоит? - Страница 2

Вова · 01.10.2007, 18:53

Цитата:

Сообщение от Budushee

У моего сайта ПР6. Эти 2 бота решили жить на нем - гугл и яхохо. Поселились и сидят. Не уходят никогда.....

Может это чьи-то парсеры сидят...

3APA3A · 03.10.2007, 23:53

Частично частотой хождения ботов можно управлять через sitemap'ы (см. https://www.google.com/webmasters/tools/ ) и через Last-Modified + If_Modified_Since.

Бот по-умолчанию редко ходит на статические страницы (или те, в которых есть Last-Modified), но при наличии большого количества таких страниц на сайте в Webmaster Tools появляется возможность увеличить частоту хождения бота.

Опять же, с помощью сайтмапа с разумно проставленными датами можно попросить гугл переиндексировать сайт когда надо.

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Сколько стоит заказать шаблон под вп	Chervechok	Курилка	3	14.07.2008 00:36
Сколько стоит домен?	denya777	Курилка	5	03.07.2008 09:11
Сколько стоит мой сайт?	Psihadelic	Курилка	27	14.04.2008 13:24
Сколько стоит домен .ru?	Anfisa	Разработка и сопровождение сайтов	8	06.02.2008 23:37
Сколько стоит PR7	Вова	Google, MSN, Yahoo	24	06.10.2007 15:32

03.10.2007, 23:53	#12
3APA3A Новичок Регистрация: 01.10.2007 Сообщений: 13 Вес репутации: 0	Частично частотой хождения ботов можно управлять через sitemap'ы (см. https://www.google.com/webmasters/tools/ ) и через Last-Modified + If_Modified_Since. Бот по-умолчанию редко ходит на статические страницы (или те, в которых есть Last-Modified), но при наличии большого количества таких страниц на сайте в Webmaster Tools появляется возможность увеличить частоту хождения бота. Опять же, с помощью сайтмапа с разумно проставленными датами можно попросить гугл переиндексировать сайт когда надо.