Невозможная нагрузка на сервер.

[deftones3]

Добавил 3 сайта в систему, и теперь постоянно скачет нагрузка на сервер.
Кроме сапы я ничего не делал, поэтому полагаю это из-за неё.

Сайты еле грузяться.

До этого было 4 сайта в trustlink, - так без проблем.

Подскажите что делать, хостер - Jino.ru

[Клон]

Сообщение от deftones3

хостер - Jino.ru

говно редкостное, или удаляйте сапу или меняйте хостера =)

[SPQR]

deftones3 , возьмите логи, посмотрите что создает сапа в %% от того что было раньше.

Из личного опыта. Недавно бот сапы начал выкачивать у меня все файлы *.wav , причем 11 раз за двое суток, а на хосте их было дохрена и больше. Хост не упал, но сильно прогнулся и мне хостер репу начистил. ТП здесь ответила "ой, добавим в исключения ... " ))).

[volokhonsky]

Ровно та же хрень на этом же хостинге. Получается какая-то своеобразная хрень с обратной связью - ссылки уходят в эррор, после чего сапа начинает штурмовать сайт ещё активнее.

[elis]

Сообщение от volokhonsky

Ровно та же хрень на этом же хостинге. Получается какая-то своеобразная хрень с обратной связью - ссылки уходят в эррор, после чего сапа начинает штурмовать сайт ещё активнее.

см. первый ответ в теме

[deftones3]

Ну вроде бы нормализовалось, я просто 5 сайтов в сапу добавил, сапа сайтмапы делала.

[qkowlew]

1. У джино на дешёвых тарифах ОЧЕНЬ плохо с нагрузочной способностью.
2. Обязательно проверьте, каким mime-type отдаются файлы с расширениями .pdf .wav .ogg и тому подобное! там Default-type text/html ворде бы на джиновском дефолтном хостинге. В результате если Вы сделали ссылку на .WAV (а не .wav) и выложили файл с расширение большими буквами - он будет отдаваться как текст-html, в частности и роботу сапе.

[SPQR]

Сообщение от qkowlew

2. Обязательно проверьте, каким mime-type отдаются файлы с расширениями .pdf .wav .ogg и тому подобное! там Default-type text/html ворде бы на джиновском дефолтном хостинге. В результате если Вы сделали ссылку на .WAV (а не .wav) и выложили файл с расширение большими буквами - он будет отдаваться как текст-html, в частности и роботу сапе.

У меня .wav маленькими буквами, но бот сапы все равно прицепился. Вы уверены что бот сапы реагирует на Default-type text/html при явном указании расширения ?

[qkowlew]

Сообщение от SPQR

У меня .wav маленькими буквами, но бот сапы все равно прицепился. Вы уверены что бот сапы реагирует на Default-type text/html при явном указании расширения ?

Я не уверен за бота сапы.
Но правильный mime-type полезен не только для бота сапы.

В принципе, если кинете в личку урл, я могу глянуть, что там криво.