Робот SAPE игнорирует robots.txt - Страница 4

Markus · 15.12.2010, 09:52

Прошло 3 года...
А воз и ныне там?

robots.txt
Disallow: /forum/calendar.php

Вчера проиндексировалось
/forum/calendar.php?c=1&do=displayweek

chahlic · 15.12.2010, 13:02

Цитата:

Сообщение от Markus

Вчера проиндексировалось
/forum/calendar.php?c=1&do=displayweek

И правильно, что проиндексировалось.

http://help.yandex.ru/webmaster/?id=996567#996572

vx777 · 15.12.2010, 13:09

Цитата:

Сообщение от chahlic

И правильно, что проиндексировалось.

http://help.yandex.ru/webmaster/?id=996567#996572

а что правильного?

User-agent: Yandex
Disallow: /cgi-bin* # блокирует доступ к страницам
# начинающимся с '/cgi-bin'
Disallow: /cgi-bin # то же самое

chahlic · 15.12.2010, 13:20

Цитата:

Сообщение от vx777

а что правильного?

согласен, не должно...

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Робот сапы пропускает станицы которые стоят в ноиндексе в файле robots.txt	gdv	Вопросы по работе системы	2	14.10.2008 21:42
Робот не находит sape код	namo	Деловое сотрудничество	11	15.03.2008 21:59
sape.ru и robots.txt	Алексей Барыкин	Ошибки при работе с системой	0	11.12.2007 22:05
Можно внести в robots.txt папку sape	clombus	Вопросы по работе системы	7	18.10.2007 14:44
Надо ли запретить доступ роботам к папке SAPE, указав её длинное имя в robots.txt ?	madcap	Вопросы по работе системы	7	02.08.2007 00:38

15.12.2010, 09:52	#31
Markus Новичок Регистрация: 14.05.2007 Сообщений: 6 Вес репутации: 0	Прошло 3 года... А воз и ныне там? robots.txt Disallow: /forum/calendar.php Вчера проиндексировалось /forum/calendar.php?c=1&do=displayweek