Нагрузка на ЦП ботом сапы
Доброго.
По-моему, похожая тема уже была. Паук сапы грузит цп хостера. Сегодня опять пришло письмо уведомляющее о превышении нагрузки: 5.67 % - 81.176.228.73 (mail3.q0.ru) Раньше такого не было. Количество страниц, на которых стоит код сапы, не менялось, кол-во ссылок тоже. Неужели опять тарифный план менять? Оговорюсь, пауки ПС на сайте пасутся постоянно но цп так не грузят. |
Наш робот один раз в сутки высасывает все страницы на сайте. Причём, последовательно, а не параллельно, поэтому нагрузка постоянная и умеренная. Если все ссылки ОК, то больше не будет в течение суток обращений.
Если какие-то ссылки в ERROR, то только страницы с этими ссылками выкачиваются ещё несколько раз в поисках ссылок. Для любого сайта это не может считаться высокой нагрузкой, но допускаю, что она выше, чем дают пауки ПС, которые не каждый день бегают по сайту. Может быть, у этого хостера много сайтов зарегистрированы в сапе? |
Цитата:
Очень может быть, кстати говоря! |
грузит при запросе страниц или при скачивании ссылок (заполнении линкс.дб)?
если первое - то при чем тут сапа? а если я буду ходить по страницам и просто их смотреть - это будет считаться превышением допустимой нагрузки? :) |
Цитата:
|
Часовой пояс GMT +3, время: 01:03. |
Работает на vBulletin® версия 3.8.7.
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
Перевод: zCarot
SAPE.RU — система купли-продажи ссылок с главных и внутренних страниц сайтов.