"Error" - страница не отвечает
 

При выходе ссылок из error на одной площадке, ошибка error сразу же появляется на другой с периодичностью 2-3 дня (т.е. 2 дня error на одном сайте, потом ссылки принимают статус OK, а error переходит на другой сайт). Ошибка - страница не отвечает.

1. site.ru
2. UTF-8, в коде внесены изменения, хостер добавил IP из links.db в белый список.
3. В links.db ссылки содержатся - файл пересоздавался.
4. Права 777
5. Ссылки на сайте выводятся
6. При нажатии на статус ERROR выводится сообщение "страница не отвечает"


--------------------------------------------------------------------------
На момент проверки наличия ссылок страницы площадки не отвечали - наш робот ждет отклика 30 секунд и в случае, если его нет, переходит к проверке следующей страницы, при этом ссылки недоступной страницы получают статус error.
Это может произойти по нескольким причинам:

1. Сайт не работает или работает медленно из-за проблем на хостинге
2. Хостер забанил IP адреса нашего робота (IP адреса робота можно посмотреть в конце файла links.db)
3. У вашего хостера стоит некий антипарсер, который на время блокирует IP адреса при частом обращении к сайту
4. Существуют проблемы на линии связи

В этой ситуации мы можем только посоветовать обратиться к хостеру.
--------------------------------------------------------------------------
ip адреса бота в списке разрешеных на сервере
root@ns1 [/etc/csf]# cat /etc/csf/csf.allow |grep 217.107.36.73
217.107.36.73 # Manually allowed - Mon Nov 24 16:54:42 2008
root@ns1 [/etc/csf]# cat /etc/csf/csf.allow |grep 217.107.36.132
217.107.36.132 # Manually allowed - Mon Nov 24 18:54:41 2008

root@ns1 [/etc/csf]# cat /etc/csf/csf.allow |grep 81.177.144.46
81.177.144.46 # Manually allowed - Mon Nov 24 18:54:48 2008


root@ns1 [/etc/csf]# cat /etc/csf/csf.allow |grep 87.242.74.101

87.242.74.101 # Manually allowed - Mon Nov 24 18:54:54 2008

root@ns1 [/etc/csf]# cat /etc/csf/csf.allow |grep 80.251.136.38
80.251.136.38 # Manually allowed - Mon Nov 24 18:54:59 2008

Анитпарсера нет. Проблем со связью не наблюдалось.
Как решить проблему?