Вопросы начинающего ВМ

[ravencrow]

Удалил площадку и создал заново. Прошла индексация. Найдено 0 страниц. Лог индексации пуст. ТП Sape говорит что робот получает отлуп. Error in cURL request: couldn't connect to host.
Хотя до удаления площадки 2 ссылки отображались на сайте, но индексация не проходила, а висели в кеше 15 страниц еще с прошлого года, вот почему логи индексации не изменялись. Значит ссылки на сайт сапа заливает с другой подсети либо как то по другому. Как еще объяснить то что ссылки проникали каким то чудом на сайт, а робот получал отлуп.
Судя по логам сервера access_log и error_log все остальные роботы Яндекс, Google, MSN, Bing и какой-то непонятный AhrefsBot/4.0(173.199.115.147) индексируют сайт регулярно и без каких либо проблем. А робота Sape в логах нет вобще, даже намека на 188.72.80.*.
Отписал своему хостеру, посмотрим чем все это закончится.

[zhegloff]

Сообщение от ravencrow

Удалил площадку и создал заново. Прошла индексация. Найдено 0 страниц. Лог индексации пуст. ТП Sape говорит что робот получает отлуп. Error in cURL request: couldn't connect to host.

горе от ума...

[ravencrow]

Сообщение от zhegloff

горе от ума...

да и не говори.

Скажите а может это из-за того что в .htaccess не было этого
RewriteCond %{HTTP_HOST} ^www.мой_сайт.ru$ [NC]
RewriteRule ^(.*)$ http://мой_сайт.ru/$1 [R=301,L]

Просто сейчас глянул аналогичную площадку на которой сапа работает там этот код есть.
Хотя добавлял сайт в сапу без www и в коде установленном на сайте тоже без www в этой строке $o['host'] = 'мой_сайт.ru';

[D.iK.iJ]

Сообщение от ravencrow

Значит ссылки на сайт сапа заливает с другой подсети либо как то по другому. Как еще объяснить то что ссылки проникали каким то чудом на сайт, а робот получал отлуп.

Сапа их не заливает Их ваш сайт скачивает сам.

[petit iphone]

Сообщение от ravencrow

Скажите а может это из-за того что

продолжайте слушать самого себя или читайте сообщение выше.
там вроде синим по белому ...

[ravencrow]

petit iphone, ваша ирония здесь не уместна.

Сегодня хостер отписал что блокировал ip робота. Запрет уже сняли.