Agent: Yandex/1.01.001 (compatible; Win16; I)

[dvakarandasha]

Кто может подсказать? судя по логам робот Agent: Yandex/1.01.001 (compatible; Win16; I) ежедневно заходит на сайт, но хавает только главную ( / ) и роботс. что может быть?

Добавлено через 34 минуты
Скажите, это как-то может быть связано с тем, что ответ сервера вот такой:

HTTP/1.1 200 OK
Server: nginx/0.8.30
Date: Wed, 03 Feb 2010 13:18:33 GMT
Content-Type: text/html
Transfer-Encoding: chunked
Connection: keep-alive
X-Powered-By: PHP/5.2.8
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Set-Cookie: mysess=72319e3ty7904a7b8337d22543у0108; path=/

[zhegloff]

Сообщение от dvakarandasha

Кто может подсказать? судя по логам робот Agent: Yandex/1.01.001 (compatible; Win16; I) ежедневно заходит на сайт, но хавает только главную ( / ) и роботс. что может быть?

О чем вопрос?
Может быть то, что робот яши ничего кроме вашей морды и роботса хавать не хочет.

Сообщение от dvakarandasha

Скажите, это как-то может быть связано с тем, что ответ сервера вот такой:

Ээээ вам Set-Cookie не нравится? Робот яши на него плевать хотел...

[Последний Герой]

Сообщение от dvakarandasha

Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0

может из этих двух заголовков? особенно из-за выделенного. вот он каждый день и по новой проверяет. а остальные просто закешировал и забыл на неделю.

[dvakarandasha]

zhegloff, да, вопрос именно в том, что кроме морды и роботса кушать ничего не хочет.

Последний Герой, дело в том что в индексе только морда. То есть Яша не мог остальные страницы закэшировать, потому что он их даже не ел.

[Красавчег]

dvakarandasha, хочешь совет?

- Напиши письмо Платону и он развеет твои сомнения.

[denza]

На сайт код сапы установлен?
сапа вроде под таким же роботом прикидывается

[dvakarandasha]

denza, нет, не установлен, я же писал выше, что в иксе только 1 страница.

[Smok]

Сообщение от denza

сапа вроде под таким же роботом прикидывается

Бред...

Сообщение от dvakarandasha

нет, не установлен, я же писал выше, что в иксе только 1 страница.

Ну и что? Если вы на сайты для Сапы код устанавливаете только после индексации Яндексом, то это абсолютно не значит, что все поступают именно так. Скорее даже наоборот.
p.s.
По теме, чтобы разобраться, нужно:
1. Видеть сам сайт. Мало ли что там в коде на главной.
2. Домен новый, не новый? В какой зоне?
3. Яша сколько времени уже не кушает сайт?
4. Беки есть на сайт? Нужно на внутрячок оформить десяток.
5. Для проверки на агс можно внутряк в addurl засунуть и посмотреть что он скажет.
6. Да и в роботсе тоже еще неизвестно что написано.

[dvakarandasha]

Smok:

1. Если ничего не поможет, то чуть позже выложу.
2. Домен новый. 2 недели отроду. Зона com. Но проблема в том, что главная залетела в индекс на второй день отроду. Проблема не в том, что в индексе сайта нет, а в том, что робот яши заходит на сайт и ничего не есть.
3. как главная в индекс попала, так всё.
4. около 60 на главную + 60 на внутряки
5. засовывал. всё нормально. /*неужели если под агсом страницы не засовываются?/
6 роботс стандартный:

User-Agent: *
Disallow:
Host: site.ru

[Vetas]

Сообщение от dvakarandasha

Скажите, это как-то может быть связано с тем, что ответ сервера вот такой:
Цитата:
HTTP/1.1 200 OK

Это - единственное, что может беспокоить в ответе (в смысле, что здесь все в порядке).
По теме - ждите, наполняйте, раскручивайте и все у вас будет! Если, конечно, сайт не под фильтром...