нужен сервис по проверке robots.txt
 

Не знаю в какой раздел воткнуть данный вопрос, поэтому, если есть необходимость - перенесите.

Вопрос такой:


В роботс запрещаю доступ к сайту, НАПРИМЕР, робота гугла.
Интересует следующее:
Существует ли сервис, по которому можно проверить, работает роботс или нет?


Идея такая: засовываю роботс в сервис проверки, задаю имя робота и получаю ответ: запрещено или нет.

Существует сие?

Помоему смысла в таком сервисе нет :) панели вебмастера позволяют проверить

Помоему Вы ошибаетесь.


каким образом там можно проверить доступ роботам? - расшифруй.

И гугл и яндекс пишут что загружено столько-то страниц и исключено роботом столько то - и указывается почему, в том числе из-за запрета в роботс.

Если запретить в роботсе сайт для определенного поисковика, например для гугла или яндекса то в соответствующих разделах панели вебмастера соответсвующих поисковиков разве не будет указано об этом?

Так существует такой сервис или нет?

p/s с панелями ЯВМ и ГВМ я не общаюсь и не буду общаться - религия, понимаешь!

http://webmaster.yandex.ru/robots.xml - проверка robots.txt без добавления сайта в панель.
Проверяем запреты для Яши, аналогично делаем запреты для Гоши.
А лучше не парим себе моск и читаем документацию.

Спасибо Вам большое, такой сервис знаю!

Но в нём у меня ничего не получилось - я и бросил.

Если Вы говорите, что в нём можно проверить доступ роботов ПС-м, то, будьте добры, НАПИШИТЕ как это делается?

Указываем хост, указываем текст robots.txt, указываем целевой урл(ы) - получаем результаты проверки урлов на доступность могучему роботу Яндекса.

Тьфу, ёлки палки - у нас недопонимание (или я выражЁвываюсь расплывчато). Мне нужна универсальная проверка: проверка на доступ к сайту всех роботов, кроме Я и Г.

Во, теперь мысль сформировалась.

Есть такой сервис, или придётся заходить в сервис проверки каждой ПС?