Вернуться   Форум SAPE.RU > Практика оптимизации > Общие вопросы оптимизации

-->
Ответ
 
Опции темы
Старый 29.06.2011, 17:36   #1
Новичок
 
Регистрация: 13.05.2010
Сообщений: 92
Вес репутации: 173
baya на пути к лучшему
По умолчанию Проблема с индексацией блога на WP, правильный ли роботс.тхт +?

Доброго времени суток, Дамы и Господа!

Пытался найти тему с помощью поиска, но не нашел нужного ответа. Так что не бить, и не посылать в гуголь без причины. Ситуация следующая: Есть блог на Вордпрессе, 3.0 версия (насколько я знаю), есть под него роботс:

User-agent: Yandex
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /search
Disallow: /?s=
Disallow: */trackback/
Disallow: */feed/
Disallow: */feed
Disallow: /?feed=
Disallow: */comments/
Disallow: */comment
Disallow: */tag/*
Disallow: */page/*
Disallow: */attachment/*
Disallow: */author/*
Disallow: /?wp-subscription-manager*
Disallow: /?_openstat*
Disallow: *?preview=*
Allow: /wp-content/uploads/
Host: site.ru

В индексе теряются страницы, из 407 загруженных (отсеченных дублей тегов, страниц, категорий) осталось 42, при этом в прошлый раз было 52, 65... Самих заметок на блоге 76. Заметки довольно объемные (3-10 тыс знаков), осмысленные, Личный блог, СДЛ. Никакой рекламы и оплаченных ссылок. То есть естественность на все 100%.

Контент вроде не тырят: Проверял плагиатусом, и еще одним онлайн сервисом. ДА и контент завязан на личном опыте, не знаю кому могло бы это понадобиться. По проверке на плагиат (буду рад, если порекомендуете толковые сервисы)

Вопросы:

1. Правильный ли роботс для ВП?
2. Где я налажал, в следствие чего выпадают страницы из индекса, или это глюк яндекса? (просто наблюдаю нездоровую тенденцию выпадания страниц)
3. Что можно сделать?

Заранее спасибо.
baya вне форума   Ответить с цитированием
Старый 29.06.2011, 17:49   #2
Глобальный Wordpress'овед
 
Аватар для Globalzru
 
Регистрация: 20.06.2008
Адрес: Чешская республика
Сообщений: 1,853
Вес репутации: 299
Globalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущееGlobalzru - прекрасное будущее
Отправить сообщение для Globalzru с помощью ICQ
По умолчанию

Такого вполне хватит

User-agent: *
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /wp-register.php
__________________
Заходите на мой личный блог [Обменяюсь ссылками с подобными сайтами, ТИЦ от 10]
Стабильный хостинг - Хочешь скидку 25% на любой НОВЫЙ заказ? Напиши!
Недорогие услуги по Wordpress
Globalzru вне форума   Ответить с цитированием
Старый 29.06.2011, 17:53   #3
дохтор металлических наук
 
Аватар для zheka796
 
Регистрация: 07.10.2009
Адрес: SELECT FROM UKRAINE
Сообщений: 1,310
Вес репутации: 235
zheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущееzheka796 - прекрасное будущее
Отправить сообщение для zheka796 с помощью ICQ
По умолчанию

Сейчас с индексацией у Яши не очень, думаю нужно подождать один ап.
Если опять выпадут тогда предпринимать какие-то действия.

Добавлено через 1 минуту
У вас случайно не такого вида адреса урлов /?s= ?
Если да, то в этой строчке:
Цитата:
Сообщение от baya Посмотреть сообщение
Disallow: /?s=
вы запретили их к индексации

Последний раз редактировалось zheka796; 29.06.2011 в 17:53. Причина: Добавлено сообщение
zheka796 вне форума   Ответить с цитированием
Старый 29.06.2011, 17:58   #4
Специалист
 
Аватар для [-ART-]
 
Регистрация: 12.05.2011
Сообщений: 220
Вес репутации: 164
[-ART-] скоро станет известен
По умолчанию

а к чему Allow: /wp-content/uploads/ ?
Вы же его и так не закрывали?
А что не закрыто, то будет роботом проверено.

Попробуйте сформировать xml карты сайту и киньте её в яндекс-вебмастер.
Предложил бы прогнать блок по rss фидам, но увы, пока не могу создать тему в нужном разделе
[-ART-] вне форума   Ответить с цитированием
Старый 29.06.2011, 23:35   #5
Новичок
 
Регистрация: 13.05.2010
Сообщений: 92
Вес репутации: 173
baya на пути к лучшему
По умолчанию

Цитата:
Сообщение от zheka796 Посмотреть сообщение
Сейчас с индексацией у Яши не очень, думаю нужно подождать один ап.
Если опять выпадут тогда предпринимать какие-то действия.

Добавлено через 1 минуту
У вас случайно не такого вида адреса урлов /?s= ?
Если да, то в этой строчке:

вы запретили их к индексации
http://site.ru/category/name-content.html
Ссылки такого рода, ЧПУ включен.

Добавлено через 1 минуту
Цитата:
Сообщение от Globalzru Посмотреть сообщение
Такого вполне хватит

User-agent: *
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /wp-register.php
От тегов и категорий - дублироваться контент будет. Хотя говорят, что яша сам разберется какие страницы оставить, а именно статьи, но нет гарантий да и АГС

Добавлено через 4 минуты
Цитата:
Сообщение от [-ART-] Посмотреть сообщение
а к чему Allow: /wp-content/uploads/ ?
Вы же его и так не закрывали?
А что не закрыто, то будет роботом проверено.

Попробуйте сформировать xml карты сайту и киньте её в яндекс-вебмастер.
Предложил бы прогнать блок по rss фидам, но увы, пока не могу создать тему в нужном разделе
Пузат советовал так, не помню чем мотивировал сею опцию. С xml картой поколдую. Посмотрим на тенденции на следующем апе, просто странно, и муторно терять страницы на качественном сайте.

Последний раз редактировалось baya; 29.06.2011 в 23:35. Причина: Добавлено сообщение
baya вне форума   Ответить с цитированием
Ответ


Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Проблема с индексацией sullivan_ Вопросы по работе системы 10 07.07.2009 23:13
Проблема с индексацией Micha3l Ошибки при работе с системой 5 25.10.2008 12:47
Проблема с индексацией el_aspect Ошибки при работе с системой 15 20.05.2008 21:15
Проблема с индексацией Manson Яндекс 1 06.02.2008 12:49
Проблема с индексацией zeleboba Ошибки при работе с системой 9 24.03.2007 11:08


Часовой пояс GMT +3, время: 10:55.