Старый 02.03.2008, 12:31   #1
Новичок
 
Регистрация: 23.11.2007
Сообщений: 57
Вес репутации: 146
yuri скоро станет известен
По умолчанию Хитрый вебмастер?

Купил достаточно дорогую ссылку на сайте id 13519 (страница id 23303468).
Проверил проиндексированность страницы - страница в индексе у Яндекса.

посмотрел robots.txt
User-agent: *
Disallow: /newshop/?
Disallow: /tv/?
Disallow: /send_link/?
и т.д.

Ссылка в одном из этих каталогов.

Насколько я понимаю, ссылка моя никогда не будет проиндексирована.
Если я прав, какие меры будут приняты к сайту нарушителю?

Был бы это просто так сайт, я бы его молча в gbl и всего делов.
Но это очень известный и крупный сайт, интересна реакция администрации.

Так же совет оптимизаторам - посмотрите, не улетают ли ваши десятки баксов просто так.
yuri вне форума   Ответить с цитированием
Старый 02.03.2008, 12:58   #2
Администратор
 
Аватар для Ank
 
Регистрация: 05.02.2007
Сообщений: 18,402
Вес репутации: 660
Ank - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущееAnk - прекрасное будущее
По умолчанию

ссылка выпадет в еррор.
сапа тоже роботс читает
__________________
Начать зарабатывать на своих сайтах. Консультирую своих рефов по аське
Покупать на алиекспресс просто и выгодно
>>> БЕСПЛАТНЫЙ КОНСТРУКТОР САЙТОВ И LANDING PAGE <<<
Читаем ФАК
Ank вне форума   Ответить с цитированием
Старый 02.03.2008, 13:02   #3
Специалист
 
Регистрация: 14.10.2007
Сообщений: 157
Вес репутации: 150
Kholod на пути к лучшему
По умолчанию

Цитата:
Сообщение от yuri Посмотреть сообщение
Купил достаточно дорогую ссылку на сайте id 13519 (страница id 23303468).
Проверил проиндексированность страницы - страница в индексе у Яндекса.

посмотрел robots.txt
User-agent: *
Disallow: /newshop/?
Disallow: /tv/?
Disallow: /send_link/?
и т.д.

Ссылка в одном из этих каталогов.

Насколько я понимаю, ссылка моя никогда не будет проиндексирована.
Если я прав, какие меры будут приняты к сайту нарушителю?

Был бы это просто так сайт, я бы его молча в gbl и всего делов.
Но это очень известный и крупный сайт, интересна реакция администрации.

Так же совет оптимизаторам - посмотрите, не улетают ли ваши десятки баксов просто так.
Ну почему же не проиндексируется?
Во-первых, Яндекс директиву User-agent: * не слушает, ему как минимум User-agent: Yandex подавай.
Во-вторых, вопросительный знак на конце директивы Disallow: запрещает только адреса с вопросительным знаком сразу после пути. Другие адреса доступны.
Для проверки именно своего адреса воспользуйтесь http://webmaster.yandex.ru/wmconsole...robots_txt.xml
Kholod вне форума   Ответить с цитированием
Старый 02.03.2008, 14:12   #4
Новичок
 
Регистрация: 23.11.2007
Сообщений: 57
Вес репутации: 146
yuri скоро станет известен
По умолчанию

Цитата:
Сообщение от Kholod Посмотреть сообщение
Ну почему же не проиндексируется?
Во-первых, Яндекс директиву User-agent: * не слушает, ему как минимум User-agent: Yandex подавай.
Позволю себе с вами не согласиться - смотрим
http://help.yandex.ru/webmaster/?id=996709#999046
Цитата:
Как осуществляется проверка robots.txt?
Для разделов, предназначенных для робота Яндекса (User-agent: Yandex или User-agent:*), анализатор проверяет директивы, руководствуясь правилами использования robots.txt.
т.е. User-agent:* он кушает на ура.

Цитата:
Сообщение от Kholod Посмотреть сообщение
Во-вторых, вопросительный знак на конце директивы Disallow: запрещает только адреса с вопросительным знаком сразу после пути. Другие адреса доступны.
Вот тут признаю свою не компетентность. Я не уверен, как вопросик понимается Яндексом, как "любой символ" или как часть пути.
Если я не прав, приношу свои извинения.

Цитата:
Сообщение от Kholod Посмотреть сообщение
Для проверки именно своего адреса воспользуйтесь http://webmaster.yandex.ru/wmconsole...robots_txt.xml
К сожалению не получается, говорит "Неверное значение параметра запроса."
Видимо у меня не хватает прав.
yuri вне форума   Ответить с цитированием
Старый 02.03.2008, 18:04   #5
Мастер
 
Регистрация: 18.08.2007
Сообщений: 833
Вес репутации: 175
tsb - за этого человека можно гордитсяtsb - за этого человека можно гордитсяtsb - за этого человека можно гордитсяtsb - за этого человека можно гордитсяtsb - за этого человека можно гордитсяtsb - за этого человека можно гордитсяtsb - за этого человека можно гордитсяtsb - за этого человека можно гордится
По умолчанию

Цитата:
Во-первых, Яндекс директиву User-agent: * не слушает,
слушает и бесстыдно пользуется ею.

Цитата:
ему как минимум User-agent: Yandex подавай.
а как максимум как тогда? User-agent: Yandex is the best search engine you've ever seen!
tsb вне форума   Ответить с цитированием
Старый 02.03.2008, 20:35   #6
Специалист
 
Регистрация: 25.09.2007
Сообщений: 361
Вес репутации: 157
shr - как роза среди колючекshr - как роза среди колючекshr - как роза среди колючекshr - как роза среди колючек
По умолчанию

Цитата:
Яндекс директиву User-agent: * не слушает, ему как минимум User-agent: Yandex подавай
false

слушает, недавно мучил роботс
shr вне форума   Ответить с цитированием
Старый 16.03.2009, 15:30   #7
Специалист
 
Регистрация: 25.09.2008
Сообщений: 199
Вес репутации: 0
колхозник не любят в этих краяхколхозник не любят в этих краяхколхозник не любят в этих краяхколхозник не любят в этих краяхколхозник не любят в этих краяхколхозник не любят в этих краяхколхозник не любят в этих краях
По умолчанию

интересно, а как быстро проверить( найти этот ID, эту площадку) в ссылках, если много страниц и ссылок?
колхозник вне форума   Ответить с цитированием
Старый 19.03.2009, 00:34   #8
Специалист
 
Регистрация: 07.01.2009
Сообщений: 446
Вес репутации: 144
optimizator - очень-очень хороший человекoptimizator - очень-очень хороший человекoptimizator - очень-очень хороший человекoptimizator - очень-очень хороший человекoptimizator - очень-очень хороший человек
По умолчанию

колхозник, ctrl+F
optimizator вне форума   Ответить с цитированием
Ответ

Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Ошибки в Вебмастер! etoYa Яндекс 18 31.07.2008 21:38
YAP - YAL - Яндекс.Вебмастер Casper Яндекс 4 06.04.2008 12:52
Яндекс вебмастер NCom Яндекс 11 20.02.2008 03:06
(Вебмастер) WAIT'ы TracKer Вопросы от новичков 2 30.11.2007 14:23
Совсем хитрый вопрос про MySQL Kashey Разработка и сопровождение сайтов 2 13.11.2007 10:51


Часовой пояс GMT +3, время: 13:09.