Форум SAPE.RU

Форум SAPE.RU (http://forum.sape.ru/index.php)
-   Общие вопросы оптимизации (http://forum.sape.ru/forumdisplay.php?f=33)
-   -   Можно ли так писать в robots.txt (http://forum.sape.ru/showthread.php?t=76304)

slovoblud 17.12.2011 21:25

Можно ли так писать в robots.txt
 
Хочу временно закрыть сайт от индексации, нормальной ли будет такая запись:
User-agent: *
Disallow: /
Host: site.ru
Или директиву Host: лучше убрать?

XAHTOB 17.12.2011 21:39

Цитата:

Сообщение от slovoblud (Сообщение 1184217)
Или директиву Host: лучше убрать?

а какая разница? сайт всё равно закрыт.

slovoblud 17.12.2011 21:58

Ага-а... Спасибо. Тогда лучше уберу. Просто читал что в роботсе если хоть какая то помарка будет то его могут не правильно прочитать, например даже если лишняя строчка будет пустая.

freehoster 18.12.2011 03:41

если "Disallow: /" стоит то индексации никакой не будет


Часовой пояс GMT +3, время: 09:40.

Работает на vBulletin® версия 3.8.7.
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
Перевод: zCarot
SAPE.RU — система купли-продажи ссылок с главных и внутренних страниц сайтов.