29.08.2013, 21:02 | #1 |
Эксперт
Регистрация: 02.03.2007
Адрес: Скобаристан
Сообщений: 2,076
Вес репутации: 346
|
У Google роботы восстание подняли?
Получаю от хостера предупреждение, превышение нагрузки на сайте. Полез в логи. Сайт представляет собой некий каталог в котором всего около 80 сайтов. По каждому сайту ведется статистика. Страница вида /stat.php& и т.д. Страниц таких ровно столько сколько сайтов в рейтинге. Так вот этот сумашедший гугл загнал своего робота на эти 80 страниц с 00:00 до 07:00 часов сегодня 72451 раз. )))) Бывает робота не загнать, а тут досс какой то со стороны гугла ))))))))))))))))))))
__________________
|
29.08.2013, 21:19 | #2 |
Добрый модератор
Регистрация: 09.07.2007
Адрес: глобус Украины
Сообщений: 27,600
Вес репутации: 1025
|
Lesnik59, может это не гугл... Айпишники какие?
__________________
Правильный хостинг. В личке бесплатно не отвечаю обычно. |
29.08.2013, 21:25 | #3 |
Эксперт
Регистрация: 02.03.2007
Адрес: Скобаристан
Сообщений: 2,076
Вес репутации: 346
|
Вуаля http://whois.net/ip-address-lookup/66.249.78.147
Он зараза приставучая.
__________________
|
30.08.2013, 02:48 | #4 |
Добрый модератор
Регистрация: 09.07.2007
Адрес: глобус Украины
Сообщений: 27,600
Вес репутации: 1025
|
Ну пропишите crawl-delay в роботсы.
__________________
Правильный хостинг. В личке бесплатно не отвечаю обычно. |
30.08.2013, 08:30 | #5 |
Эксперт
Регистрация: 02.03.2007
Адрес: Скобаристан
Сообщений: 2,076
Вес репутации: 346
|
__________________
|
30.08.2013, 09:46 | #6 | |
Эксперт
Регистрация: 16.04.2013
Адрес: Украина, 3 мин до метро
Сообщений: 1,262
Вес репутации: 171
|
Цитата:
Добавлено через 5 минут в панели ВМ в Гоше при этом мне сообщают, что данная директива не учитывается. Для надежности сначала стоит посмотреть статистику работы роботов по адресу https://www.google.com/webmasters/to...iteUrl=http://сайт.ру/ - если тут не будет всплеска, то адрес скорее всего подменный. Если всплеск таки есть, то где-то в панели ВМ можно регулировать нагрузку на сайт от робота Гоши - это точно сработает в отличие от robots.txt
__________________
Но почему спит твой разум, а эти чудовища лезут в мой дом? Последний раз редактировалось elia_ua; 30.08.2013 в 09:46. Причина: Добавлено сообщение |
|
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Близится восстание машин | contentsys | Курилка | 11 | 05.11.2011 06:34 |
Роботы яши уже в запое?... | Globalzru | Курилка | 11 | 11.12.2009 15:54 |
Роботы | Jooz | Курилка | 16 | 24.03.2009 11:52 |
Спам роботы | Condenser | Курилка | 14 | 18.09.2008 19:41 |
Роботы опять отдыхают? | big.bon | Яндекс | 31 | 22.07.2008 07:09 |
Часовой пояс GMT +3, время: 01:36.