Старый 17.04.2011, 22:20   #11
Новичок
 
Регистрация: 21.03.2011
Сообщений: 59
Вес репутации: 160
Voody на пути к лучшему
По умолчанию

открыл файл лога...
наверное вот это бот сапы
HTTP/1.1" 403 89 "-" "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; SV1)"
как узнать кол-во запросов/интенсивность.... и предположим я буду знать. Что мне это даст?
Voody вне форума   Ответить с цитированием
Старый 17.04.2011, 22:32   #12
Новичок
 
Регистрация: 22.04.2008
Сообщений: 67
Вес репутации: 0
Uss может только надеяться на улучшение
По умолчанию

В логе 1 строка = 1 запрос. Сколько у Вас строк за вчерашний день?
Есть много разных программ, позволяющих работать с логами. Когда научитесь его фильтровать по ботам и ip, сможете корректно настраивать доступ к своему сайту в htaccess и при необходимости выяснять отношения с хостером.
Uss вне форума   Ответить с цитированием
Старый 17.04.2011, 22:40   #13
Новичок
 
Регистрация: 21.03.2011
Сообщений: 59
Вес репутации: 160
Voody на пути к лучшему
По умолчанию

59 тыс. строк
Voody вне форума   Ответить с цитированием
Старый 17.04.2011, 22:46   #14
Новичок
 
Регистрация: 22.04.2008
Сообщений: 67
Вес репутации: 0
Uss может только надеяться на улучшение
По умолчанию

Это совсем не много, если только хостер не жлоб и не тарифицирует операции чтения/записи сверх некого лимита. Если Вы еще никого не гнобили в htaccess, то примерно половина трафика уходит в никуда. У Вас есть поляна для многих экспериментов.
Uss вне форума   Ответить с цитированием
Старый 17.04.2011, 22:54   #15
Новичок
 
Регистрация: 21.03.2011
Сообщений: 59
Вес репутации: 160
Voody на пути к лучшему
По умолчанию

13-го \33 тыс запросов\ 403 - 1 ответов
14-го \28 тыс. запросов\ 403 - 0 ответов
15-го \65 тыс. запросов\ 403 - 37 тыс. ответов (аппорт)
17-го \59 тыс. запросов\ 403 - 27 тыс. ответову (сапа)

Последний раз редактировалось Voody; 17.04.2011 в 23:00.
Voody вне форума   Ответить с цитированием
Старый 17.04.2011, 23:00   #16
Новичок
 
Регистрация: 22.04.2008
Сообщений: 67
Вес репутации: 0
Uss может только надеяться на улучшение
По умолчанию

В течение суток одна и таже страница отдавала 403 и 200 ? Или страница отдавала только 403 на все запросы ?
При таком раскладе или на сайте не хватает половины запчастей или хостер ну полное говно.
Uss вне форума   Ответить с цитированием
Старый 17.04.2011, 23:05   #17
Новичок
 
Регистрация: 21.03.2011
Сообщений: 59
Вес репутации: 160
Voody на пути к лучшему
По умолчанию

да..... в течение суток и 403 и 200

я сам как-то хотел через xenu сделать сайт мап и битые ссылки проверить.... он 2к нашел.... а потом 403.... я тут же полез на сайт посмотреть в чем дело а там страничка 403..... остановил xenu.. и через 2-3 минуты все Ок... 200

Добавлено через 1 минуту
хость руцентр

я нуб у них админка хостинга очень удобная... а мастерхост и cpanel для меня ужс...

Последний раз редактировалось Voody; 17.04.2011 в 23:05. Причина: Добавлено сообщение
Voody вне форума   Ответить с цитированием
Старый 17.04.2011, 23:08   #18
Новичок
 
Регистрация: 22.04.2008
Сообщений: 67
Вес репутации: 0
Uss может только надеяться на улучшение
По умолчанию

Убейте хостера, он вешает на Вас свои внутренние проблемы.
Uss вне форума   Ответить с цитированием
Старый 17.04.2011, 23:18   #19
Новичок
 
Регистрация: 21.03.2011
Сообщений: 59
Вес репутации: 160
Voody на пути к лучшему
По умолчанию

Цитата:
Если Вы еще никого не гнобили в htaccess,
это как?

Цитата:
то примерно половина трафика уходит в никуда
. в смысле половина получает 403? Я только что проверил идут запросы с разных IP и например IP аппорта получил 403 а следом в это же секунду IP человека получает 200


Цитата:
У Вас есть поляна для многих экспериментов.
знать бы только что делать ))

мне бы сапы бота для начала..... нормально по сайту провести

Добавлено через 1 минуту
посоветуйте хорошего.....

Последний раз редактировалось Voody; 17.04.2011 в 23:18. Причина: Добавлено сообщение
Voody вне форума   Ответить с цитированием
Старый 17.04.2011, 23:23   #20
Новичок
 
Регистрация: 22.04.2008
Сообщений: 67
Вес репутации: 0
Uss может только надеяться на улучшение
По умолчанию

Например вот так:

Deny from 67.218.116.131
Deny from crawl-6c.cuil.com

и больше этот бот беспокоить не будет.

Сделайте запрос в техподдержку хостера. Спросите почему разная отдача для неблокированных посетителей.
Uss вне форума   Ответить с цитированием
Ответ

Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Нагрузка бота ITT Вопросы по работе системы 6 17.04.2011 20:43
Нагрузка на сервер и САПЕ lincolndsp Вопросы по работе системы 49 14.06.2010 10:58
Нагрузка на сервер Fredy314 Курилка 1 17.06.2009 00:37
Нагрузка на сервер new Разработка и сопровождение сайтов 21 13.05.2008 21:16
Нагрузка на сервер Skipper Вопросы по работе системы 21 12.03.2008 15:06


Часовой пояс GMT +3, время: 16:54.