Вопрос о robots.txt

[Апокалипсис]

На время разработки СДЛ - прикрыли сайт robotsом.
Проиндексировалась только морда.
Роботс убрали, прошёл месяц Я не индексирует страницы.
Собственно, что посоветуете, и сколько времени нужно Яндексу?

[Se0man]

User-agent: *
Allow: /
может так?

Добавлено через 52 секунды
и в аддурелку сайт засунте

Добавлено через 1 минуту
сайт в личку если можно

[Апокалипсис]

Роботс убрал вообще. В аддурилке - написано что сайт проиндексирован и доступна 1 страница. - т.е. морда (даже без кэша).

[Sega]

http://help.yandex.ru/webmaster/?id=996567 может что полезное найдете

[Se0man]

возможно яндекс увидел блокирующий роботс на вашем сайте и увеличил время между заходами на сайт. Поэтому я и говорил чтоб добавили роботс и кину в аддурелку.Ещё как вариант в вебмастер добавьте. или пишите платону

[Апокалипсис]

Понятно, спасибо.

[slovo]

сколько времени нужно Яндексу?

Наблюдаются задержки в индексации до 2 месяцев, можно как-то расшевелить робот Яндекса. Известно если текст на странице не менялся, то робот заходит на нее все реже и реже. Выход просто обновить информацию, добавить или изменить описание на этих страницах. Для сравнения новостные сайты индексируются и обновляются даже за 1 день.
Еще заметил если вы удалили страницу и ее больше не существует в индексе она появляется еще долгое время, значит задержки в индексации

[Smok]

Сообщение от Se0man

возможно яндекс увидел блокирующий роботс на вашем сайте и увеличил время между заходами на сайт. Поэтому я и говорил чтоб добавили роботс и кину в аддурелку.Ещё как вариант в вебмастер добавьте. или пишите платону

Еще в панели ВМ можно закачать для проверки robots.txt
В логах это отлично видно будет.

Тогда Яша точно его(новый robots) и опознает.


Добавлено через 1 минуту

Сообщение от slovo

можно как-то расшевелить робот Яндекса

Иенно то, о чем я написал.

[Regent]

Самый проверенный выход, это писать платону....
Пусть вручную включают всё

[Vlad64]

Сообщение от Апокалипсис

На время разработки СДЛ - прикрыли сайт robotsом.
Проиндексировалась только морда.
Роботс убрали, прошёл месяц Я не индексирует страницы.
Собственно, что посоветуете, и сколько времени нужно Яндексу?

PHP код:

User-agent: Yandex
Crawl-delay: 10

User-agent: Yandex
Disallow: /administrator
Disallow: /index.php?showuser= 


Проверено временем!!! Действует не взирая на заголовок Yandex на всех Роботов! Яша, Гоша и прочие делают столько же заходов сколько и раньше, но уже не за два часа, а за 24! Таким образом нагрузки на сервер нет...