10.09.2010, 17:33 | #1 |
Эксперт
Регистрация: 12.12.2009
Адрес: Ростов-на-Дону
Сообщений: 1,537
Вес репутации: 248
|
Индексация страниц 404
Кто в курсе поделитесь своим знанием (а то придётся ставить эксперимент).
Есть кучка ГСов, для сбора трафика на основной сайт. Страница, с которой есть переход на основной сайт - закрыта через robots.txt Но яша ведь сначала загружает страницы, а потом "исключает". Поэтому такие страницы периодически оказываются проиндексированными. 1. Если на этой странице возвращать ошибку 404 - я так понимаю яша её даже загружать ведь не будет? 2. Все ли браузеры нормально будут отображать такую страницу? (т.е. с контентом, но возвращающую код 404)
__________________
Самый удобный Хостинг (в т.ч. сейчас - бесплатное полугодовое тестирование хостинга Node.JS) |
10.09.2010, 18:34 | #2 | |
Специалист
Регистрация: 04.12.2009
Сообщений: 298
Вес репутации: 190
|
код 404 можно возвращать, если user-agent =yandexbot
А лучше в таком случае возвращать "403 - доступ запрещен" и разумеется отправлять пустую страницу. А для простых смертных выдавать нормальную страницу с контентом и 200 ОК. Цитата:
Добавлено через 1 минуту 403 предпочтительнее 404 в смысле честности. Если вы возвращаете 404 яндексу, а всем остальным 200, то это клоакинг. А если вы яндексу суёте 403, то как бы говорите, что мол страница на самом деле есть, но вам туда нельзя. Последний раз редактировалось giftday; 10.09.2010 в 18:34. Причина: Добавлено сообщение |
|
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Индексация страниц | artoff | Яндекс | 7 | 12.08.2010 20:55 |
Индексация страниц | GraD2010 | Вопросы по работе системы | 19 | 01.06.2010 13:16 |
Индексация страниц | Solven | Вопросы по работе системы | 4 | 06.02.2010 20:55 |
Индексация страниц | partyproject | Вопросы от новичков | 3 | 06.02.2009 21:24 |
Индексация страниц | kip | Пожелания пользователей системы | 1 | 13.06.2007 22:38 |
Часовой пояс GMT +3, время: 07:00.