02.02.2009, 13:04
|
#1 |
|
Новичок
Регистрация: 21.11.2008
Сообщений: 15
Вес репутации: 0
 |
Проблема с последней индексацией сайта Яндексом
Здравствуйте,
Есть следующая проблема с яндексом, которая возникла по-моей глупости. Есть сайт со 100 страницами. Для нормальной индексации в Яндексе через оснастку "Мои сайты" добавил файл sitemap.xml, в котором прописаны все страницы, но с префиксом www, например: <url> <loc>http://www.mysite.ru/index.htm</loc> </url> Яндекс файл прочитал и все страницы нормально проиндексировал с префиксом www. Соответственно во внутренних ссылках выдался результат в 100 страниц. После этого, я в robot.txt добавил строчку Sitemap: http://mysite.ru/sitemap.xml а в файле sitemap.xml удалил из всех страниц префикс www: <url> <loc>http://mysite.ru/index.htm</loc> </url> В результате, при последней индексации в оснастке "Мои сайты" появилось уже два файла sitemap.xml: http://mysite.ru/sitemap.xml и http://www.mysite.ru/sitemap.xml, а количество внутренних ссылок увеличилось до 200, каждая проиндексированная страница дублируется с префиксом www! Соответсвенно упал и ТИЦ сайта. Подскажите, Яндекс сам догадается склеить страницы с префиксом и без, чтобы не дублировались? Если нет, то что можно предпринять в данном случае? Попробовал удалить файл sitemap.xml в оснастке "Мои сайты", который добавлял когда-то вручную, но выдается ошибка: Ошибка: Недоступен необходимый сервис. |
|
|
|
02.02.2009, 14:41
|
#2 |
|
Сапер со стажем
Регистрация: 16.05.2007
Адрес: Днепропетровск
Сообщений: 4,382
Вес репутации: 523
 |
robots.txt сделайте, пропишите в нем основной хост и все будет норм.
 Добавлено через 1 минуту User-agent: Yandex Disallow: Host: www.mysite.ru
__________________
Последний раз редактировалось Smok; 02.02.2009 в 14:41. Причина: Добавлено сообщение |
|
|
|
|
02.02.2009, 16:38
|
#3 |
|
Новичок
Регистрация: 21.11.2008
Сообщений: 15
Вес репутации: 0
|
Так есть robots.txt:
User-agent: * Disallow: /catalog/ Disallow: /links.htm Disallow: /references.htm Disallow: /refers.htm Sitemap: http://mysite.ru/sitemap.xml Только я сначала прописал в Яндексе путь к sitemap.xml: http://www.mysite.ru/sitemap.xml а потом из robots.txt яндекс добавил http://mysite.ru/sitemap.xml. И страницы продублировались: с www и без www. |
|
|
|
|
02.02.2009, 16:51
|
#4 | ||
|
Сапер со стажем
Регистрация: 16.05.2007
Адрес: Днепропетровск
Сообщений: 4,382
Вес репутации: 523
|
Ну ясно же написано:
Цитата:
Цитата:
__________________
|
||
|
|
|
|
02.02.2009, 21:54
|
#6 | |
|
Сапер со стажем
Регистрация: 16.05.2007
Адрес: Днепропетровск
Сообщений: 4,382
Вес репутации: 523
|
Цитата:
Yandex/1.01.001 (compatible; Win16; H) - робот, определяющий зеркала сайтов. Вполне возможно, что если в панели ВМ Яши сделать анализ robots.txt предварительно его заменив на нужный, то этот бот может забежать позже. Если хотите еще быстрее - напишите письмо Платону. p.s. http://help.yandex.ru/webmaster/?id=996567#996574
__________________
|
|
|
|
|
|
04.02.2009, 13:50
|
#8 |
|
Новичок
Регистрация: 21.11.2008
Сообщений: 15
Вес репутации: 0
|
Спасибо за ответы. Платону я все-таки на всякий случай написал, еще тогда-же, когда опубликовал здесь этот пост, но ответа пока нет. Файл robot.txt обрабатывается ботом каждый день в 21.00. Но склейки все-равно пока не произошло. В оснастке все-равно болтается 2 файла сайтмапа. На всякий случай я удалил из robot.txt информацию о сайтмапе вообще. Может одна запись в консоли яндекса исчезнет?
|
|
|
|
 |
|
|
Похожие темы
|
||||
| Тема | Автор | Раздел | Ответов | Последнее сообщение |
| проблема с индексацией сайта | ivashka | Ошибки при работе с системой | 7 | 01.12.2008 20:09 |
| Проблемы с индексацией Яндексом. | timeout | Яндекс | 36 | 18.10.2008 20:21 |
| Проблема с полной индексацией сайта Sap-ом | MasterYan | Ошибки при работе с системой | 4 | 27.09.2008 15:59 |
| Проблема с индексацией сайта | efor | Ошибки при работе с системой | 19 | 05.08.2007 11:26 |
| показ последней даты проверки сайта | steelbear | Пожелания пользователей системы | 1 | 04.05.2007 10:31 |
Часовой пояс GMT +3, время: 20:26.