04.07.2008, 15:21 | #31 |
Мастер
Регистрация: 05.06.2008
Адрес: Somali
Сообщений: 648
Вес репутации: 232
|
Сколько рекомендуемый размер страницы для бота сапы и имеет ли принципиальное значение для него время генерации страницы? (есть ли таймауты, по истечении которых бот перестает ждать ответа от страницы и обрабатывает только то что получил?)
Добавлено через 1 минуту а вообще, я малость ошибся. 300 кило это вместе с фотками, скиптами и прочими ужасами - хтмл кода не больше 50 кило. Documents (4 files) 49 KB (58 KB uncompressed) Images (31 files) 149 KB Objects (0 files) Scripts (7 files) 29 KB (61 KB uncompressed) Style Sheets (6 files) 10 KB Total 237 KB (278 KB uncompressed) не думаю, что бот сапы читает стили, картинки и скрипты.. Последний раз редактировалось Hanapi; 04.07.2008 в 15:26. Причина: Добавлено сообщение |
04.07.2008, 15:37 | #32 |
Администратор
Регистрация: 05.02.2007
Сообщений: 18,405
Вес репутации: 715
|
30 секунд ждет. Максимум.
__________________
Читаем ФАК |
05.07.2008, 09:47 | #34 |
фОшЫст
|
__________________
|
05.07.2008, 09:53 | #35 |
Мастер
Регистрация: 05.06.2008
Адрес: Somali
Сообщений: 648
Вес репутации: 232
|
стоило, наверное, прочитать предыдущие сообщения, прежде чем давать ответ невпопад. Если бы Вы так сделали, поняли бы, что хостер тут непричем.
Добавлено через 3 минуты можно было бы грешить на долгое время генерации страницы.. но дневной бот ни разу не оставил ни одной ссылки в эрроре! а ночной ВСЕ ссылки в еррор кидает. причем уже стабильно каждый день. а другой сайт на хосте и вовсе безошибочно отрабатывает.. Последний раз редактировалось Hanapi; 05.07.2008 в 09:57. Причина: Добавлено сообщение |
05.07.2008, 09:57 | #36 |
Мастер
Регистрация: 10.12.2007
Сообщений: 566
Вес репутации: 237
|
Заметил, что на одном сайте примерно аналогичная ситуация. На том же хостинге стоит ещё несколько сайтов (в основном сателлиты) и ночью где-то 30-40% ссылок улетают в еррор с ошибкой "Страница не найдена", потом всё уходит в ОК и вечером доначисления. Сайт стоит на этом сервере где-то месяц, до этого проблем не было и на прошлом сервере (на котором тоже сейчас стоят сайты, на них ерроров нет). Есть как альтернативный вариант перенос на мой 3 сервак, но, как вижу, я не один с такой проблемой. Может быть проблема в роботе сапы? Может что-то меняли в алгоритмах поиска? Если б вербос показывал, что случилось со страницей. А то 404 антифлуд не выводит.
__________________
Зарегистрируйся в системе моим рефералом |
10.08.2008, 03:09 | #38 |
Мастер
Регистрация: 05.06.2008
Адрес: Somali
Сообщений: 648
Вес репутации: 232
|
Решил проблему. Даже скажу как - перенес код сапы выше, в самое начало страницы, и эрроры исчезли. Вывод: утренний бот сапы "глотает" определенное количество килобайт сайта, или в ходе динамичной генерации страницы не ждет окончания генерации. Уж не знаю чей косяк, но косяк однозначно, ибо такое нигде не описано и не предупреждено..
__________________
помог? отблагодари! |
10.08.2008, 04:23 | #39 |
Новичок
Регистрация: 02.02.2008
Сообщений: 82
Вес репутации: 199
|
Тоже самое, последнии дни ссылки в ERROR:ссылка не найдена на странице. Хотя все ссылки отображаются! В links.db они все присутствуют. Хостер ничего не блокирует. Все работало без проблем около года. Если раньше утренний бот возвращал ссылки в статус ОК, то теперь замечаю рост массы ссылок, висящих в ERROR по двое суток
Проблема есть, а администрация пытается убедить, что траблы мол на вашей стороне. Нет, проблемы имхо все же на вашей стороне! |
10.08.2008, 09:50 | #40 | |
Администратор
Регистрация: 22.11.2006
Сообщений: 5,868
Вес репутации: 21475165
|
Цитата:
|
|
Опции темы | |
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Ссылки в ероре.. страница не отвечает | Chervechok | Ошибки при работе с системой | 10 | 24.06.2008 11:51 |
.:: проблема с начислением денег за ссылки::. | ramzez | Вопросы от новичков | 7 | 22.04.2008 16:04 |
Все ссылки в ероре Что делать ? | sosik | Вопросы по работе системы | 229 | 17.04.2008 11:37 |
Было всё ок, а теперь контекст в ероре! | Mozgnsk | Ошибки при работе с системой | 0 | 30.03.2008 11:51 |
Проблема, не отображаются продажные ссылки | Liveon | Вопросы по работе системы | 3 | 01.06.2007 00:01 |
Часовой пояс GMT +3, время: 13:12.