Sitemap - нужно или нет?

[zaistinu]

Сообщение от dva-main

Если на сайте с динамическим контентом (динамичной структурой) не генерить sitemap автоматом хотя бы раз в сутки - лучше, что б его и не было. проверено - при наличии статического sitemap новые страницы цепляются ботами, но ооочень тормознуто.
пишешь за 5 минут свой скриптик - и кроном его. имхо: этот сервис или для очень ленивых, или для кого сапа - б@г

У меня как раз все сайты динамические - построены на CMS e107 - там на каждую страницу возникает еще 5-6 вариантов этой же самой страницы (типа комменты, версия для печати и т.д.) что увеличивает индекс сайта в 5-6 раз. То есть я правильно понимаю, что в моем случае лучше Сайтмап не делать? Лучше ждать пока Яша сам все найдет?

[Алексей Барыкин]

Сообщение от dva-main

вот интересно, вытянул роботс у CNN:

вроде слегка не по стандарту - sitemap до User-agent? или я туплю?

Вывод - либо у cnn тайное знание имеется, либо программист - тормоз.
Скорее второе.

[dva-main]

Сообщение от zaistinu

То есть я правильно понимаю, что в моем случае лучше Сайтмап не делать?

по моему опыту вариант: "вот тебе основные страницы в sitemap, остальные сам найдёшь", не проходит. либо всё и часто отслеживается - либо ничего.
но написать (найти, купить в к.к.) скрипт и запускать хотя бы раз в сутки - не проблема. крон, вообще то, для таких траблов и нужен
может сапа предлагает: составить sitmap для неё, заказать и дождаться переиндексацию, ну а потом снести его нафиг, если не нужен. как вариант ускорения переиндексации

Добавлено через 15 минут

Сообщение от Алексей Барыкин

Вывод - либо у cnn тайное знание имеется, либо программист - тормоз.
Скорее второе.

скорее:
1. опыты ставит как лучше: что бы не набивать лишний раз директивы оставил, но из блока UserAgent их выдернул
2. либо уже убедился: те боты, которые корректно работают с sitemap и так скушают, а другим и знать ничего не надо
всё ж таки PR 9...

[V I P]

Приветствую?

Вы себя спрашиваете??

1) А нужен ли он?

Если есть динамические страницы, блоки ссылок, меню на яша-скрипте и другие разделы, доступ к которым по ссылкам затруднен для бота - делайте..
Если страницы статические, голенький html с прямыми ссылками на все страницы - можете не делать..

[dva-main]

если все ссылки на страницу закрыты от ботов (скриптовые там или ещё что) - хоть оппишись в sitemap, в основной индекс она не войдёт

[sergbond]

Сообщение от dva-main

те боты, которые корректно работают с sitemap и так скушают, а другим и знать ничего не надо
всё ж таки PR 9...

Готов поспорить, что на пиар он даже не смотрит.