Робот сапы перегружает сервер провайдера!

[chop6]

вчера все сайты были в статусе ок, сегодня все опять в еррор, кроме новых
ip не банили

[Phentis]

Опять ссылки ушли в еррор!
Логин: megabyte**

[lygun]

У меня продолжают отваливаться ссылки по ошибке "страница не отвечает". Уже сил нет.
Посмотрел логи от Мастерхоста за 23 марта по доступу с IP=217.107.36.73

04 часа 05 минут
С 18-й по 24 секунду - 33 запроса за 6 секунд. Статус - 200 (ok)
С 24-й по 27 секунду - 137 запросов за 3 секунды. Статус - 503-я (сервер перегружен).

19 часов 18 минут
С 4-й по 8-ю секунду - 22 запроса за 5 секунды. Статус - 200
С 8-й по 9-ю секунду - 90 запросов за 2 секунды. Статус - 503-я (сервер перегружен)


22 часа 38 минут
С 30-й по 34 секунду - 20 запросов за 5 секунды. Статус - 200
В течение 34-й секунды - 72 запроса в течение 1 секунды. Статус - 503

Можно ли 50-100 запросов в секунду назвать перегрузкой сервера?
И не мог ли робот Сапы как-то поделикатней нападать на сервера?

[alexey_ls]

у меня на агаве сайт. В error-е каждый день 40-60 ссылок из примерно 200, обычно при вечерней проверке все улаживается, но не всегда, если только часть в error, какая тут может быть причина, кто-нибудь сталкивался и решал ли? Бана получается нет, ссылки висят на месте, в ТП ответом был посыл в бесполезный раздел "вопросы и ответы".

[chop6]

вот теперь всё сайты на нашем серваке в ерроре, сапорт молчит, в бане ни одного айпишника не наблюдаем.

[Avelon]

пишите ситуацию и логины в личку ему http://forum.sape.ru/member.php?u=3673

[chop6]

Сообщение от Avelon

пишите ситуацию и логины в личку ему http://forum.sape.ru/member.php?u=3673

отписал вчера вечером, ждём

[Jonny Mad]

Сообщение от lygun

У меня продолжают отваливаться ссылки по ошибке "страница не отвечает". Уже сил нет.
Посмотрел логи от Мастерхоста за 23 марта по доступу с IP=217.107.36.73

04 часа 05 минут
С 18-й по 24 секунду - 33 запроса за 6 секунд. Статус - 200 (ok)
С 24-й по 27 секунду - 137 запросов за 3 секунды. Статус - 503-я (сервер перегружен).

19 часов 18 минут
С 4-й по 8-ю секунду - 22 запроса за 5 секунды. Статус - 200
С 8-й по 9-ю секунду - 90 запросов за 2 секунды. Статус - 503-я (сервер перегружен)


22 часа 38 минут
С 30-й по 34 секунду - 20 запросов за 5 секунды. Статус - 200
В течение 34-й секунды - 72 запроса в течение 1 секунды. Статус - 503

Можно ли 50-100 запросов в секунду назвать перегрузкой сервера?
И не мог ли робот Сапы как-то поделикатней нападать на сервера?

это очень похоже на правду и видимо в этом и проблема
я уже неделю теряю по 100-300 рублей в день из-за этого (после массового сбоя, проблема осталась, многие пишут об этом, я тоже пытался обратить на это внимание, но в ответ вместо помощи наткнулся только на грубость, что у меня "руки кривые" и "может глаза откроются".

после массового сбоя одного робота починили полностью (того который днем ходит), а второго (ночного) оставили глючным. в итоге каждый день утром на сайтах появляется куча ерроров, к вечеру большинство из них переходит в ОК, но какие-то остаются
а ссылки между прочим видны круглосуточно и бесперебойно

короче для меня сапа превратилась в рулетку, каждый день жду с ужасом, не зная, сколько же ерроров увижу с утра.

[lygun]

Сообщение от Jonny Mad

это очень похоже на правду и видимо в этом и проблема
я уже неделю теряю по 100-300 рублей в день из-за этого (после массового сбоя, проблема осталась, многие пишут об этом, я тоже пытался обратить на это внимание, но в ответ вместо помощи наткнулся только на грубость, что у меня "руки кривые" и "может глаза откроются".

после массового сбоя одного робота починили полностью (того который днем ходит), а второго (ночного) оставили глючным. в итоге каждый день утром на сайтах появляется куча ерроров, к вечеру большинство из них переходит в ОК, но какие-то остаются
а ссылки между прочим видны круглосуточно и бесперебойно

Я сравнил с нагрузкой от Яндекса. Он запрашивает одну страницу в 2-3 секунды. А Сапа - 4-5 страниц в секунду. Т.е. бот Сапы грузит сайт в 10-15 раз больше, чем Яндекс.

После долгого общения с Мастерхостом узнал, что как раз в дни начала этого бардака (19-20 марта) они поставили систему мониторинга загрузки. Как загрузка превышает 2.5%, так сайт отключается на 1-2 секунды. А причиной перегрузки является либо тупой бот, нападающий на форум, либо робот Сапы.

[markoff]

mchost
та же проблема отключили сайт изза перегрузки, типа большое количество незакрытых подключений