20.11.2007, 11:38 | #21 |
Новичок
Регистрация: 09.09.2007
Сообщений: 47
Вес репутации: 203
|
для Я возможен вариант после того как прописано в роботсе тупо сделать заявку на удаление на http://webmaster.yandex.ru/delurl.xml
просто после того как страницы проиндексированы они сразу после постановки на защиту от индексирования не удаляется. это просходит с той же скоростью что и индексация новых страниц. |
20.11.2007, 22:45 | #23 |
Специалист
Регистрация: 04.10.2007
Адрес: Киев
Сообщений: 152
Вес репутации: 205
|
Первый раз такое слышу
Обычно яндекс очень быстро прекращает попытки индексации, если ему что-то не нравится. А тут столько бездвоздмездных стараний ))
__________________
дизайн |
21.11.2007, 01:50 | #24 |
Мастер
|
|
21.11.2007, 08:38 | #25 | |
Специалист
Регистрация: 16.06.2007
Сообщений: 197
Вес репутации: 209
|
Цитата:
Код:
Order Deny,Allow #запретить доступ YANDEX-BIGSEARCH3 Deny from 87.250. #запретить доступ YANDEX-BIGSEARCH2 & Yandex corporate network Deny from 213.180. #запретить доступ непонятного робота Deny from 189.139.45.156 Deny from 38.99.203.110 #запретить доступ робота mail.ru Deny from 194.186.55.207
__________________
|
|
21.11.2007, 08:46 | #26 |
Специалист
Регистрация: 16.06.2007
Сообщений: 197
Вес репутации: 209
|
Ага, и мне не верили.. - три сайта по роботсу запрещены - а их бот там шорошится, а там где он нужен его фиг дождешся
__________________
|
21.11.2007, 15:26 | #28 |
Мастер
Регистрация: 25.06.2007
Сообщений: 665
Вес репутации: 233
|
Ruslan
Сделайте страницу ban.php. В которой будет определяться IP и записываться в htaccess его бан. Но влетят все боты, и даже люди (если им кто то даст такую ссылку). Лучше форму сделать. Обычную, как при отправке мыла. Только написать: Я хочу в бан: Имя: Предсмертное послание: ОК Человек то не заполнит, А спамбот с радостью На счет яшки с гуглями незнаю. |
21.11.2007, 17:36 | #29 |
Мастер
|
ну уже не нужно.
проанализировал логи... проблема была в том что боты долго не перечитывали robots.txt - как только они переччитывали его и сайт был вкючен то с этого ip шторм прекращался. принудительно я их не мог заставить перечитать ибо я видете ли не в индексе. а сами они их читают редко + ботов много и каждый должен перечитать его самостоятельно.... странные у яши кластеры хочу я вам сказать |
21.11.2007, 17:38 | #30 | |
Мастер
|
Цитата:
привык через ядро (в смысле напрямую на фаэрвол). |
|
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Уважаемая администрация, скажите IP ваших ботов. Это необходимо для защиты от хакеров | Администрация 6-ой палаты | Курилка | 55 | 22.09.2008 12:24 |
Скажите про ERROR | vitalius | Ошибки при работе с системой | 10 | 19.04.2008 09:50 |
Идиот! | Mendel | Вопросы по работе системы | 20 | 19.11.2007 06:26 |
Скажите, когда наступает 25-е? | s0410 | Ошибки при работе с системой | 4 | 25.08.2007 17:25 |
Часовой пояс GMT +3, время: 09:39.