Форум SAPE.RU - Sape робот

Форум SAPE.RU (http://forum.sape.ru/index.php)

- Пожелания пользователей системы (http://forum.sape.ru/forumdisplay.php?f=15)

- - Sape робот (http://forum.sape.ru/showthread.php?t=33362)

Был бы очень признателен если бы Sape робот правильно отображал свой user-agent.
Сейчас Sape user-agent выглядит так:

Код:

Http Code: 200        Date: Jun 22 12:53:07        Http Version: HTTP/1.1        Size in Bytes: 10575

Referer: -

Agent: Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)

Намного грамотнее было бы вот так:

Код:

Http Code: 200        Date: Jun 22 12:53:07        Http Version: HTTP/1.1        Size in Bytes: 10575

Referer: -

Agent: Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; http://www.sape.ru)

Вот например Yahooшный:

Код:

Http Code: 200        Date: Jun 22 03:24:24        Http Version: HTTP/1.0        Size in Bytes: 1987

Referer: -

Agent: Mozilla/5.0 (compatible; Yahoo! Slurp/3.0; http://help.yahoo.com/help/us/ysearch/slurp)

и Googoльный:

Код:

Http Code: 200        Date: Jun 21 17:00:59        Http Version: HTTP/1.1        Size in Bytes: 5453

Referer: -

Agent: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

Премного благодарен, ...

pgolovko, Клоакинг в комфорте?:D

Русская мафия, +1)

ТС, айпи роботов-сапы и так известны, чего еще нужно то?

Наоборот, хотелось бы Sape в robots.txt (и не только) добавить в /disallow на некоторые странички. Ато слишком много мусора сканирует, времени нехочу тратить на уборку вручную.

Добавлено через 1 минуту

Цитата:

Сообщение от justworker (Сообщение 484741)

ТС, айпи роботов-сапы и так известны, чего еще нужно то?

Спасибки за намек с IP, попробую :D

Добавлено через 2 минуты
Да, кстати.. IP только етот (81.177.144.46) или еще есть?

Цитата:

Сообщение от pgolovko (Сообщение 484744)

А вы для яндекса в дизалоу поставьте, робот сапе и не будет туда ходить;)

Цитата:

Сообщение от Русская мафия (Сообщение 484740)

pgolovko, Клоакинг в комфорте?:D

Не, вряд ли. Нафига клоакинг на САПу настраивать? Любой О зайдет (а он зайдет, факт) и обнаружит, что ссылок нема - и усе. Клоакинг на Яшу делать надоть :)

Добавлено через 1 минуту

Цитата:

Сообщение от zhegloff (Сообщение 484881)

А вы для яндекса в дизалоу поставьте, робот сапе и не будет туда ходить;)

Ага, значит САПа-робот правилам Яши следует в роботс? Ну что ж, логично. Полезно знать...