Генерация файла robots.txt

[RWA]

Сообщение от Ufaweb

Что-за идиотизм?! Чем отличается /index.php?show=rules&level=checkers от /?show=rules&level=checkers, а?

Тем, что в общем случае это разные страницы. DirectoryIndex может быть любым, каким вы его в конфиге определите. Хоть default.asp, хоть xyz.php.

[Farum]

Сообщение от den78ru

Для сапоробота это абсолютно разные страницы.
Disallow: /?show= // не будут проиндексены все страницы урл которых содержит ?show=

ты совершено прав сапр не находит эти страницы он думает что они
http://www.ххх/index.php?show=rules&level=checkers и читает их неиндексированые