Нужна помощь по robots.txt. Или иной совет.

TR#ll · 27.04.2014, 17:28

Итак, дамы и господа, ситуация такова. Имеется сайт:

_www.site.ru_

движок которого при добавлении новой статьи (для примера, пусть это будет статья под порядковым номером 3212) делает ее в тройном экземпляре, получаются ссылки вида:
1. _www.site.ru/index.php?option_html3212
2. _www.site.ru/article_32_12.php
3. _www.site.ru/content-3212.php

От первого варианта избавился добавлением в robots.txt строки вида:
Disallow: /index.php?

Вопрос: как избавиться от второго варианта? Если не ошибаюсь, вот так нельзя: Disallow: /article

Заранее спасибо ^_^

zhegloff · 27.04.2014, 17:37

Цитата:

Сообщение от TR#ll

Если не ошибаюсь, вот так нельзя: Disallow: /article

почему нельзя?

TR#ll · 27.04.2014, 17:42

Цитата:

Сообщение от zhegloff

почему нельзя?

Ну вот я как бы и задаю вопрос: можно так или нет?
Т.е. если будет в роботсе написано:

Disallow: /article

роботы от поисковиков поймут, что не надо индексировать страницы с адресами:
_www.site.ru/article_00_01.php
_www.site.ru/article_00_02.php
...
_www.site.ru/article_32_12.php

или не поймут?

zhegloff · 27.04.2014, 17:51

Цитата:

Сообщение от TR#ll

Ну вот я как бы и задаю вопрос: можно так или нет?

Нет, вы написали, что так нельзя.

Цитата:

Сообщение от TR#ll

Т.е. если будет в роботсе написано:

Disallow: /article

То не будут индексироваться все урлы, которые начинаются с /article

Клон · 27.04.2014, 17:54

Цитата:

Сообщение от TR#ll

или не поймут?

на яндексе есть фак с примерами и форма проверки корректности роботса

MonAmur · 27.04.2014, 17:56

TR#ll, а как ссылки на сайте выглядят?

TR#ll · 27.04.2014, 18:03

Безумно-огромное человеческое всем спасибо!

mouse_kill · 28.04.2014, 04:22

После экспериментов всегда можно проверить составленное правило тут

27.04.2014, 17:28	#1
TR#ll Специалист Регистрация: 29.06.2007 Сообщений: 244 Вес репутации: 214	Нужна помощь по robots.txt. Или иной совет. Итак, дамы и господа, ситуация такова. Имеется сайт: _www.site.ru_ движок которого при добавлении новой статьи (для примера, пусть это будет статья под порядковым номером 3212) делает ее в тройном экземпляре, получаются ссылки вида: 1. _www.site.ru/index.php?option_html3212 2. _www.site.ru/article_32_12.php 3. _www.site.ru/content-3212.php От первого варианта избавился добавлением в robots.txt строки вида: Disallow: /index.php? Вопрос: как избавиться от второго варианта? Если не ошибаюсь, вот так нельзя: Disallow: /article Заранее спасибо ^_^ __________________ Всем удач и благополучия!

27.04.2014, 17:56	#6
MonAmur Эксперт Регистрация: 03.07.2007 Адрес: Chinatown Сообщений: 7,265 Вес репутации: 609	TR#ll, а как ссылки на сайте выглядят? __________________ отличная тизерка тексты по 10 руб/кзнак автоматизируй все, не мучайся!

27.04.2014, 18:03	#7
TR#ll Специалист Регистрация: 29.06.2007 Сообщений: 244 Вес репутации: 214	Безумно-огромное человеческое всем спасибо! __________________ Всем удач и благополучия!

28.04.2014, 04:22	#8
mouse_kill Мастер Регистрация: 29.01.2009 Адрес: дефолт-сити Сообщений: 510 Вес репутации: 216	После экспериментов всегда можно проверить составленное правило тут __________________ Серьезной компании вебпоиска требуется квалифицированная уборщица. Требования: знание UNIХ-систем, способность восстановить систему после своих действий. Кнопка бабло

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Нужен совет или помощь по тематикам сайта.	Romik	Общие вопросы оптимизации	9	17.05.2014 18:25
Нужна помощь в robots	Piratseo	Разработка и сопровождение сайтов	3	30.01.2013 20:38
нужна помощь в написании robots.txt	Vorona34	Курилка	10	27.02.2011 13:49
Нужна помощь или совет	lbmoney	Курилка	3	13.02.2011 02:09
Нужна ли пустая строка при составлении robots.txt	Антон Маринин	Курилка	4	15.09.2010 21:59

Опции темы
Версия для печати Отправить по электронной почте