Можно ли так писать в robots.txt

slovoblud · 17.12.2011, 21:25

Хочу временно закрыть сайт от индексации, нормальной ли будет такая запись:
User-agent: *
Disallow: /
Host: site.ru
Или директиву Host: лучше убрать?

XAHTOB · 17.12.2011, 21:39

Цитата:

Сообщение от slovoblud

Или директиву Host: лучше убрать?

а какая разница? сайт всё равно закрыт.

slovoblud · 17.12.2011, 21:58

Ага-а... Спасибо. Тогда лучше уберу. Просто читал что в роботсе если хоть какая то помарка будет то его могут не правильно прочитать, например даже если лишняя строчка будет пустая.

freehoster · 18.12.2011, 03:41

если "Disallow: /" стоит то индексации никакой не будет

17.12.2011, 21:25	#1
slovoblud Специалист Регистрация: 24.07.2010 Сообщений: 495 Вес репутации: 206	Можно ли так писать в robots.txt Хочу временно закрыть сайт от индексации, нормальной ли будет такая запись: User-agent: * Disallow: / Host: site.ru Или директиву Host: лучше убрать?

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Можно писать причину ошибки?	-Владимир-	Пожелания пользователей системы	6	26.10.2008 21:52
Можно внести в robots.txt папку sape	clombus	Вопросы по работе системы	7	18.10.2007 14:44
Сколько можно челобитную писать? О, раскручтичикииии....	artemia	Вопросы по работе системы	10	22.06.2007 20:06

17.12.2011, 21:58	#3
slovoblud Специалист Регистрация: 24.07.2010 Сообщений: 495 Вес репутации: 206	Ага-а... Спасибо. Тогда лучше уберу. Просто читал что в роботсе если хоть какая то помарка будет то его могут не правильно прочитать, например даже если лишняя строчка будет пустая.

18.12.2011, 03:41	#4
freehoster Специалист Регистрация: 26.10.2011 Адрес: москва Сообщений: 221 Вес репутации: 0	если "Disallow: /" стоит то индексации никакой не будет