Старый 09.03.2008, 17:26   #1
Новичок
 
Регистрация: 17.07.2007
Сообщений: 44
Вес репутации: 174
Skipper на пути к лучшему
По умолчанию Нагрузка на сервер

Вот что сегодня получил от хостера....

Цитата:
Здравствуйте,

Уведомляю, что скриптами Вашего аккаунта xxx.xxx создается повышенная нагрузка на сервере, приводящая к проблемам с работой всего сервера.

User Domain %CPU %MEM MySQL Processes
xxx xxx.xxx 70.90 16.70 0.1
Top Process %CPU 90.5 /usr/bin/php
Top Process %CPU 38.5 /usr/bin/php
Top Process %CPU 34.7 /usr/bin/php

Скриптами php пользователя xxx используется до 70% CPU и 16% памяти, что является очень большим значением.

На этот момент ситуация усилилась критическим образом, сейчас:

[root@russia2 public_html]# ps aux | grep xxxx | wc -l
38

38 подобных процессов, которые перегружают сервер.

Мы вынужденны заблокировать аккаунт до решения этой ситуации.

Все php скрипты выполняют подключения к IP: 217.107.36.132, который по нашим данным принадлежит сервису SAPE.
Брр....что могло случится? Все пол года работало и ничего, и вот нате....

Запросам к страниц с ссылками не много - не более 1000-1500 в день. Ссылок тоже не много примерно 3000

Можно как я понимаю изменить

Цитата:
var $_cache_lifetime = 3600; // Пожалейте наш сервер :о)
// Если скачать базу ссылок не удалось, то следующая попытка будет через столько секунд
var $_cache_reloadtime = 600;
Если поставить проверку не раз в час, а два раза в день нормально все будет?

Но в этом ли дело? Может произошел какой либо сбой - и при каждом запросе каждые десять минут ($_cache_reloadtime) - происходил запрос в САПЕ?

Вот доступа к аккаунту нет пока, ничео про состояние файла с ссылками сказать не могу..

Кто что подскажет?
Skipper вне форума   Ответить с цитированием
Старый 09.03.2008, 17:39   #2
Мастер
 
Аватар для new
 
Регистрация: 25.06.2007
Сообщений: 665
Вес репутации: 202
new - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордится
По умолчанию

Наверняка где то писали, ток не нашел...
Где нить написано про то, как робот работает?
1-2 раза в сутки проверяет нахождение ссылок, это понятно, что открывает все страницы, где проданы урлы. А те страницы, где нет ссылок - не трогает?
При покупке ссылки - трогает только ту страницу, на которой купили?

Т.е. у меня вот в сапе примерно 1500 страниц, проданы ссылки только на 80-100 (вот только к ним он и делает запросы?)

Просто если ко всем, то поудаляю часть страниц тогда. Т.к. нагрузка тоже волнует сейчас, но как мне кажется, это гугль грузит Т.к при одинаковой посещаемости, нагрузка в некоторые дни возрастает в 2 раза.
__________________
new вне форума   Ответить с цитированием
Старый 09.03.2008, 17:48   #3
Новичок
 
Регистрация: 17.07.2007
Сообщений: 44
Вес репутации: 174
Skipper на пути к лучшему
По умолчанию

Робот тут не причем.... Пускай хоть пооткрывается страницами...все равно пользователи на пару порядков больше страниц открывают.... Тут речь если я правильно понял, о том что из МОИХ скриптов идут обращения к внешнему IP и именно это вызывает проблему.
Skipper вне форума   Ответить с цитированием
Старый 09.03.2008, 18:00   #4
Мастер
 
Аватар для new
 
Регистрация: 25.06.2007
Сообщений: 665
Вес репутации: 202
new - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордитсяnew - за этого человека можно гордится
По умолчанию

не скажите, если у вас 3000 ссылок, то если бот сапы проверяет их 2 раза в сутки, то грузить будет ровно столько, сколько 6000 хитов юзерами.
Соотв. если юзеры делают меньше, то только одна сапа нагрузит серв больше, чем юзвери.
__________________
new вне форума   Ответить с цитированием
Старый 09.03.2008, 18:39   #5
Новичок
 
Регистрация: 17.07.2007
Сообщений: 44
Вес репутации: 174
Skipper на пути к лучшему
По умолчанию

Юзвери делают минимум 30к в сутки. Плюс ссылок порядка 3к уже как месяца четыре, а нагрузка говорят появилась только в середине февраля. До этого была в 4-6 меньше. И по дате подхдит что как раз обновил до 1.0.1 версию sape.php
Skipper вне форума   Ответить с цитированием
Старый 09.03.2008, 18:50   #6
Специалист
 
Регистрация: 22.11.2007
Сообщений: 213
Вес репутации: 174
sergey9 скоро станет известен
По умолчанию

Цитата:
Сообщение от Skipper Посмотреть сообщение
Юзвери делают минимум 30к в сутки.
так они постепенно, в течение суток, а сапин робот за короткое время сканирует кучу страниц - вот и нагрузка
sergey9 вне форума   Ответить с цитированием
Старый 10.03.2008, 00:28   #7
Мастер
 
Аватар для Serboy
 
Регистрация: 27.07.2007
Адрес: Краснодар
Сообщений: 767
Вес репутации: 197
Serboy - просто великолепная личностьSerboy - просто великолепная личностьSerboy - просто великолепная личностьSerboy - просто великолепная личностьSerboy - просто великолепная личностьSerboy - просто великолепная личностьSerboy - просто великолепная личность
По умолчанию

Цитата:
Сообщение от sergey9 Посмотреть сообщение
так они постепенно, в течение суток, а сапин робот за короткое время сканирует кучу страниц - вот и нагрузка
Тоже задавался подобным вопросом.
Как робот САПы проверяет ссылки? Все разом и одновременно?
Возможно ли сделать (или так и есть - поправьте), чтобы страницы со ссылками скачивал постепенно (к примеру, случайно среди всех пользователей, либо в течение дня)?
__________________
Черное море - Туапсе. Летний отдых в туапсе.
Serboy вне форума   Ответить с цитированием
Старый 10.03.2008, 00:41   #8
Модератор
 
Регистрация: 29.10.2007
Сообщений: 1,313
Вес репутации: 208
sin - за этого человека можно гордитсяsin - за этого человека можно гордитсяsin - за этого человека можно гордитсяsin - за этого человека можно гордитсяsin - за этого человека можно гордитсяsin - за этого человека можно гордитсяsin - за этого человека можно гордитсяsin - за этого человека можно гордитсяsin - за этого человека можно гордится
По умолчанию

Для начала: Вы не можете у хостера уточнить, о каком именно скрипте(-ах) идет речь? Они ж на логи ориентируются, должно быть зафиксировано. А зная скрипты, можно уже что-то точнее предположить... Если речь идет о sape.php напр. - одно дело, о других (напр., выводящих страницы) - другое. /usr/bin/php ваще наводит на мысли о кроне...
sin вне форума   Ответить с цитированием
Старый 10.03.2008, 12:17   #9
Новичок
 
Регистрация: 17.07.2007
Сообщений: 44
Вес репутации: 174
Skipper на пути к лучшему
По умолчанию

Речь идет на 99% о sape.php - потому что только оттуда есть исходящие соединения на данный IP. Вообщем давайте подразумевать что нагрузку создает sape.php запросами к серверу САПЕ. Вопрос почему в середине февраля могла возрасти нагрузка в 5-6 раз?
Skipper вне форума   Ответить с цитированием
Старый 10.03.2008, 12:44   #10
Злой модератор
 
Аватар для Wink
 
Регистрация: 25.03.2007
Адрес: Deep forest
Сообщений: 5,346
Вес репутации: 472
Wink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущееWink - прекрасное будущее
По умолчанию

Вопрос почему этих процессов оказалось целых 38? Или это выборка за какой-то промежуток времени была?
Wink вне форума   Ответить с цитированием
Ответ

Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Выделенный сервер jokero Деловое сотрудничество 28 30.09.2008 20:59
Нагрузка на сервер new Разработка и сопровождение сайтов 21 13.05.2008 21:16
Где взять сервер K0rwin Разработка и сопровождение сайтов 0 15.04.2008 01:39
Нагрузка на ЦП ботом сапы Antirex Вопросы по работе системы 4 20.09.2007 08:54
Сервер лег? holod Вопросы по работе системы 4 13.08.2007 08:05


Часовой пояс GMT +3, время: 07:23.