08.06.2009, 19:45 | #84 |
Мастер
Регистрация: 02.02.2008
Сообщений: 801
Вес репутации: 233
|
Если у вас на странице в среднем 2 ссылки, то у вас 50 страниц со ссылками => нужно сделать 50 последовательных запросов к вашему сайту... Если сайт не справляется с этой нагрузкой, то стоит подумать над его оптимизацией, а не валить все на сапу.
|
08.06.2009, 20:00 | #85 |
Специалист
Регистрация: 03.05.2008
Сообщений: 109
Вес репутации: 0
|
сайт не работал неделю, сапот с проблемой не справился, сказал что где то в ворпресе трабла и посоветовали переустановить. а я щас папку сапы удалил и заработало все прекрасно
Добавлено через 1 минуту да, и до сапы сайт прекрасно работал Последний раз редактировалось pinkponk; 08.06.2009 в 20:00. Причина: Добавлено сообщение |
09.06.2009, 00:46 | #87 | |
Bannеd
Регистрация: 17.09.2008
Сообщений: 6,446
Вес репутации: 369
|
Цитата:
удалите линкс.дб и он создастся занова, но его владельцем будет nobody |
|
09.06.2009, 01:32 | #88 | |
Эксперт
Регистрация: 23.11.2007
Адрес: Туда ведут благие намерения...
Сообщений: 1,280
Вес репутации: 324
|
Цитата:
Добавлено через 4 минуты Как вариант Вы удалили два файла links.db и words.db а хостер заблокировал IP сапы последние перечислены в конце файла links.db в этом случае престает работать СМС, так было у меня и при удалении кода САПЫ все начинает работать, но проблема не рассасывается так как хостер должен разбранить IP САПЫ если Вы хотите с ней работать.
__________________
Последний раз редактировалось RedPage; 09.06.2009 в 01:32. Причина: Добавлено сообщение |
|
09.06.2009, 12:32 | #89 |
Новичок
Регистрация: 30.01.2008
Сообщений: 68
Вес репутации: 201
|
Огромная просьба к администрации утихомирить сканирующих ботов
Ну почему Вы сканируете ссылки все и сразу?
Несколько тысяч ссылок и сервер в дауне... неужели нельзя сканировать ссылки рандомно с разных серверов? Так чтобы распределить нагрузку в течении суток. ps У кого наблюдаются подобные проблемы, просьба присоединиться к просьбе. Возможно это поможет стать ботам сапы таким же доброжелательным к нашим сайтам какими являются боты Гугля. Которые сканируют в сотни раз больше страниц и при этом не вырубают сервера. |
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Робот Сапы и Crawl-delay | Sea | Вопросы по работе системы | 10 | 13.02.2012 12:17 |
Робот сапы не видит установленный код | karizma | Установка кода на различные движки | 7 | 16.07.2009 11:22 |
Понимает ли робот сапы allow в robots.txt? | Danila | Вопросы по работе системы | 6 | 04.02.2009 17:59 |
робот сапы не видит ссылки | stremlenie1 | Ошибки при работе с системой | 2 | 26.11.2008 13:22 |
Робот сапы не видит код на .narod.ru | Эмка | Ошибки при работе с системой | 2 | 23.10.2008 11:47 |
Часовой пояс GMT +3, время: 18:07.