27.01.2010, 09:46 | #1 |
Специалист
Регистрация: 23.08.2008
Адрес: Санкт-Петербург
Сообщений: 171
Вес репутации: 194
|
Как определить бота sape?
Добрый день!
На сайте порядка 100 тыс страниц (в сапе только малая часть), чтобы предотвратить полное скачивание, идет логирование количества закачек с одного IP за определенный интервал времени. И если количество превышено, отдается пустая страница. Но это приводит к тому, что бот SAPE, проверяющий установленные ссылки, тоже попадает под этот фильтр. Мне бы хотелось для SAPE убрать эти ограничения, но как определить, что это пришел бот SAPЕ? |
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Проблемы на хостинге из-за бота Sape | tarin | Вопросы по работе системы | 52 | 13.01.2010 10:51 |
как закрыть страницы от бота SAPE | sats | Вопросы по работе системы | 5 | 04.11.2009 16:55 |
IP бота sape | Lena27 | Вопросы от новичков | 10 | 14.10.2009 15:43 |
Странное поведение SAPE бота | rech2379 | Вопросы по работе системы | 2 | 27.05.2009 17:06 |
Вопрос по поводу SAPE-бота | KirillK | Ошибки при работе с системой | 1 | 31.03.2009 21:02 |
Часовой пояс GMT +3, время: 22:01.