Очень странные Error-ы
 

Здравствуйте!
Проблема началась 21 июля и продолжается уже 3-й день. Во время утренних проверок (с 02 до 11) у меня уже 3-й день почти половина (каждый раз разные) ссылок уходит в еррор. Это происходит на двух моих сайтах - на одном больше ссылок, на другом меньше. Причины две или "Не найден ip домена" или "Истёк таймаут страницы". Первое что я сделал, это прочитал форум особенно про ip домена и написал хостеру. Хостер проверил ДНС и заверил, что сайты работают нормально. Но до сегодняшнего утра я ему верил не до конца, пока сам не увидел сейчас, как сайт прекрасно работает - ссылки на нём отображаются, а в это же время ссылки оказываются в статусе еррор по причине "Истёк таймаут" с указанием времени в которое я сам просматривал сайт и смотрел на ссылки, которые там отображаются. У меня сейчас открыто две вкладки, на одной сайт, на другой интерфейс сапы, где растёт число ерроров.

Единственное небольшое торможение страниц наступает только когда я удаляю файл links.db (он у меня больше 2-х мегабайт).

Во время вечерних проверок (во второй половине дня) все ерроры в предыдущие 2 дня исчезали и начисления были. Ерроры только во время утренних проверок.

Что это может быть? Помогите, пожалуйста.

Скажите, пожалуйста, если увеличить этот параметр, это поможет?
var $_socket_timeout = 6; // Сколько ждать ответа


И ещё вопрос - если оптимизаторы ставят значение "снимать ссылки, если они в статусе еррор больше 3 дней", то завтра у меня будут сниматься ссылки, несмотря на то, что вечерние проверки их выводят из этого статуса?

Спасибо большое.

Добавлено через 1 час 5 минут
Забыл написать, что естественно, у меня никаких банов по ip нет. При этом на других сайтах все ссылки находятся (ни одного еррора).
Пока пытался разобраться с этой проблемой за час в статус еррор перешло ещё несколько тысяч ссылок, которые отображаются на сайте - ни одного сбоя сайтов за это время не было - я по ним всё это время хожу.

Вероятно поможет решить проблему ещё одно наблюдение - я сейчас зашёл в интерфейс оптимизатора (я тоже закупаю ссылки на других сайтах) - там тоже многие ссылки стоят в статусе еррор, при этом они отображаются. Отсюда делаю вывод, что это не только на моих сайтах. При этом мои ссылки (как оптимизатора) перешли в статус еррор только на больших порталах, где видимо закуплено много ссылок.

Т.е. пока из малой статистики судя по моим сайтам и по сайтам, где я закупаю ссылки как оптимизатор, я делаю вывод, что в статус ерррор сваливаются ссылки на больших сайтах с большим числом страниц, где закуплено много ссылок. На маленьких сайтах, где ссылок закуплено меньше 2000 ссылки Сапа находит нормально.

нет не поможет, это время ожидания получения файла с ссылками с сапы.

у этой настройки минимальный интервал 7 дней, так что можете пока не волноваться.

А по поводу ERRORов "не найден ip для домена" и "при запросе страницы истек таймаут" они скорей всего со стороны сапы. Уже не один раз было такое, что выпадали почти все ссылки в ERROR, сразу писал в обратку что бы запустили перепроверку и через 20-30 минут уже все ОК.

По купленным ссылкам также видно что в последнее время проблема с ERRORами по утрам обострилась.

Это не у Вас, у меня таже самая проблема с 19го числа, писал в обратку, ссылки перепроверяли, вчера вот только было для одного сайта, перепроверили и потом написали "Здравствуйте, проблема анализируется."
Сегодня совершенно для другого сайта, с другими NS серверами и совершенно на другом хостинге получилась такая ботва, все ссылки в error.
Будем ждать пока починять, а пока единственный выход - писать в обратку просьбы с перепроверкой ссылок, т.к. проблема не со стороны сайта.

Догадки о том, что летят ERRORы только на больших сайтах не верны, т.к. сегодня на слабеньком сайте все слетели.
Смотрю ещё купленные ссылки, очень много ночью слетает по такой-же причине - мз купленных 1000 ссылок, у 100 не найден IP.

Сегодня была таже проблема, все ссылки ушли в error - "Не найден ip домена". Написал в обратку с просьбой запустить перепроверку ссылок. Через 2, может 3 часа всало всё наместо. Проблема ни в хостере или ДНС, это в сапе неполадки.

Последние 3-4 дня наблюдаю такую же проблему, подозрения именно на робота САПЫ! Сайты работают нормально, все ссылки отображаются, хостер заверяет, что запросы из подсети не блокирует. Однако регулярно 99% ссылок на нескольких сайтах уходят в ERROR (обычно при вечерней проверке)..

Уходят и не выходят оттуда пока не запрошу перепроверку у тех.помощи САПЫ. Что посоветуете делать? Напишите, как вы с этим справились? (интересуют только те случаи, когда ВСЕ ссылки РЕГУЛЯРНО выпадают в ERROR)!

Начинаю уже подумывать, не сменить ли мне хостера?

Подтверждаю проблему. САПА стала мухлевать с начала этой недели! Пишу им аналогично в супорт - проблему через полчаса устранаяют перепроверкой своего робота. Сейчас посмотрел статистику лога ERROR - полтергейст какой то в нём:
получается, что "якобы" робот старался перепроверить да ещё и неодин раз в течении часа. Но на самом деле ничего подобного не было. Я сам себе хостер. Стоит мониторинг SLA. Пакетный фильтр ни одного пакета от робота сапы не получал. Вывод напрашивается сам собой - САПА мухлёет - ссылки на сайте висят - бабки по ним не начисляются. Конкурент САПЫ на тех же страницах никаких проблем не имеет. А по САПЕ все сылки сразу падают в ERROR.

А вы так в обратку и напишите...

А есть гарантия, что от страха САПА будет работать как и прежде? Такое ощущение, что робот просто пролетает список некоторых сайтов, не справляясь со своей работой.

Вас забанит.

Нет, есть вероятность, что ваши сайты, нарушающие правила системы, из оной выкинут, и проблема с роботами сапы будет решена раз и навсегда.