Робот и заголовки - Страница 2

Jooz · 19.06.2008, 11:35

он проверяет ее доступность и соответствие содержанию в кеше

sergbond · 19.06.2008, 11:40

Цитата:

Сообщение от Jooz

он проверяет ее доступность и соответствие содержанию в кеше

А откуда ей быть в кэше, если она запрещена к индексированию в роботс?

Jooz · 19.06.2008, 11:43

проверяет нет ли там "линкдора" и так далее. роботс не запрещает индексирование а запрещает выдавать содержимое в поиске

stumed · 19.06.2008, 13:32

Вообще-то, роботс именно запрещает индексирование.
Все культурные поисковики, именно так, должны это понимать.

Jooz · 19.06.2008, 13:59

Цитата:

Сообщение от stumed

Вообще-то, роботс именно запрещает индексирование.
Все культурные поисковики, именно так, должны это понимать.

Так бы линкопомойки развивались бы одна за другой. Яндекс и не индексирует исходя из вашего робот.тхт, при этом если есть на страничках ссылка на "не индексируемую" страничку, робот обязательно ее посетит но в индекс (индексация) не включит. За-то другие инструменты будут анализировать ее на черные методы.

vadyaiski · 19.06.2008, 20:12

Скажите пожалуйста. Как узнать частоту захода робота яндекс на мой сайт. И вообще как узнать заходит ли он туда?

19.06.2008, 11:35	#11
Jooz Вредина Регистрация: 03.07.2007 Адрес: д.Коноплянка Сообщений: 3,535 Вес репутации: 434	он проверяет ее доступность и соответствие содержанию в кеше __________________ Чтобы произошло чудо нужно обязательно дунуть. Если не дунуть - чуда не произойдет! ツ

19.06.2008, 11:43	#13
Jooz Вредина Регистрация: 03.07.2007 Адрес: д.Коноплянка Сообщений: 3,535 Вес репутации: 434	проверяет нет ли там "линкдора" и так далее. роботс не запрещает индексирование а запрещает выдавать содержимое в поиске __________________ Чтобы произошло чудо нужно обязательно дунуть. Если не дунуть - чуда не произойдет! ツ

19.06.2008, 13:32	#14
stumed Новичок Регистрация: 30.05.2008 Сообщений: 49 Вес репутации: 0	Вообще-то, роботс именно запрещает индексирование. Все культурные поисковики, именно так, должны это понимать. __________________ Обращение к ВЦ - эксперимент!!!

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Отвалившиеся страницы и заголовки!	etoYa	Яндекс	14	14.07.2008 18:55
робот-обманщик	romkin	Ошибки при работе с системой	0	29.03.2008 04:05
Я - не робот!	Parazny	Ошибки при работе с системой	9	24.12.2007 22:22
Ваш робот переидексации	trOid	Вопросы по работе системы	16	28.11.2007 22:43
Робот не пересчитывает ВС	SilentSmart	Ошибки при работе с системой	1	08.08.2007 16:43

19.06.2008, 20:12	#16
vadyaiski Новичок Регистрация: 03.05.2008 Сообщений: 7 Вес репутации: 0	Скажите пожалуйста. Как узнать частоту захода робота яндекс на мой сайт. И вообще как узнать заходит ли он туда?