Форум SAPE.RU - помогите проверить robots.txt

Форум SAPE.RU (http://forum.sape.ru/index.php)

- Яндекс (http://forum.sape.ru/forumdisplay.php?f=16)

- - помогите проверить robots.txt (http://forum.sape.ru/showthread.php?t=12173)

shr	26.04.2008 21:41

помогите проверить robots.txt

Почему-то из индекса Яндекса выпала большая часть страниц сайта, при этом в гугле все нормально. С noindex все нормально, незакрытых не нашел.

User-agent: *
Disallow: /r.php
Disallow: /files
Allow: /
Host: site.ru

Подскажите, нет ли здесь ошибки? Allow: / добавил уже после выпадения, думал, поможет, но эффекта нет... И вообще есть ли разница в порядке испоьзования Allow и Disallow? Интуитивно я подумал, что нет. Но мало ли.

siarzhuk

26.04.2008 23:05

Пишите платонам. Вылет сайта из яндекса сейчас - нормальное дело.

Алексей Барыкин

26.04.2008 23:19

Инструкций Allow в файлах robots.txt не бывает. Её распознаёт Гоша, но она не входит в стандарт
Напишите так:

Код:

User-agent: Yandex

Disallow: /r.php

Disallow: /files

Host: site.ru



User-agent: *

Disallow: /r.php

Disallow: /files

Но думаю что причина вылета из индекса не в robots.txt

sVs	27.04.2008 00:28

Цитата:

Сообщение от Алексей Барыкин (Сообщение 138394)

Инструкций Allow в файлах robots.txt не бывает. Её распознаёт Гоша...

и Яша тоже, только на на практике редко используется

V I P

27.04.2008 03:52

Цитата:

Почему-то из индекса Яндекса выпала большая часть страниц сайта

Сейчас Яндекс колбасит по-страшному.. Моих тоже выпало очень много ((

shr	27.04.2008 15:42

До выпадения было

User-agent: *
Disallow: /r.php
Disallow: /files
Host: site.ru

я и добавил Allow: / подумав, что из-за его отсутсвия случилось выпадение... просто странно так совпало - как только добавил запреты

Disallow: /r.php
Disallow: /files

сайт выпал почти полностью из индекса. Или это просто совпадение? Платону писать не хочется, но, видимо, придется :(

sVs	27.04.2008 18:50

Allow: / - ставить было не обязательно, сайт выпал не из-за этого, совпадение

Часовой пояс GMT +3, время: 07:23.