Masayuki |
02.10.2007 14:57 |
user-agent системы sape
Ситуация следующая: сайт очень большой с ценным контентом, до того, как мы ввели систему бана по ip за большое кол-во просмотров страниц в день, некоторые умники выкачивали десятки, а иногда и сотни тысяч страниц за сутки. Поэтому считаем ввод фильтра необходимым.
У нас есть база user-agent, которым разрешается полная выкача сайта (гугл, яндекс и т.д.). Вопрос следующий: как официально выглядит user-agent системы sape, чтобы можно также было ввести его "белый список" и разрешить полный допуск? На данный момент мы обнаружили лишь SAPE.BOT is watching you! Есть ли другие user-agent у системы sape?
p.s. Просим прощения, если вопрос обсуждался, но поиск по форуму результатов не дал.
|