Гугль очень часто индексирует сайты

[Ticksy]

Возникла у нас проблема. Может она странная, но мы действительно уже не знаем что делать. Дело в том, что гугль стал буквально круглосуточно индексировать сайты на VPS (2.2 ггц Х 2, 3 гб озу, debian). Такое ощущение, что круглосуточно досят сайт с помощью Loic. Ложится Apache за Nginx'ом, забивается память.

Проверял ип - гугла. Юзер агент его тоже (хотя это не показатель). Но поведение на него похоже, как так на одном домене переставили форум, а были запросы от гугла по старым (досеры вряд ли бы заморачивались).

Такое поведение длится около недели. Проблема буквально на ровном месте. До этого месяц было все спокойно, даже Apache был фронтом (сейчас только как бэк, иначе бы запросто ложился постоянно с такой нагрузкой).

Что можете посоветовать? Написать в гугль? Вообще думал блокировать запросы, но 99% что это гугль и тогда пострадает индексация.

[seosher]

заворачивайте этот ip на localhost (херте т.е.) у Гугла есть и другие айпи с которых он ходит.
Ещё попробуйте зарегить сайт в их вебмастере, посмотреть, что там и оттуда же написать им в сапорт с описанием проблемы.

[Qwazimodo]

Ticksy,

В robots.txt Есть волшебная директива

Craw-delay

С помощью которой можно управлять скоростью индексации сайта.

Гуглите в этом направлении и будет вам счастье.