11.11.2009, 16:02 | #1 | |
Новичок
Регистрация: 19.03.2009
Сообщений: 19
Вес репутации: 0
|
Алгоритм робота Sape по индексации сайта
Здравствуйте, уважаемые создатели и разработчики Sape.ru!
Я имею информационный сайт с достаточно большим количеством разделов и подразделов. Сейчас передо мной стоит задача грамотно создать меню и навигацию сайта + постараться "запихнуть" в sape как можно больше страниц своего сайта. Столкнулся с тем, что многие страницы моего сайта не индексируются Вашим роботом. В Вашей справке написано: Цитата:
Некоторые имеют по 10 ссылок на страницы 3-его уровня, а некоторые по 100 или более. А если учесть, что эти 100 нужных мне ссылок в HTML-коде стоят после еще 50-70 "мусорных" ссылок (элементы меню, дизайна и т.д.), то получается что 150 ссылка - это гдето середина того, что я реально хотел бы добавить в базу Sape. В связи с вышеизложенным хотелось бы четкого понимания что Вами подразумевается под "внутренней ссылкой" и каков алгоритм подсчета количества уже полученных "внутренних ссылок": 1) Понимает ли робот, что http://www.mydomain.ru/page1.php - это внутренная ссылка при анализе сайта www.mydomain.ru? 2) Понимает ли робот, что http://mydomain.ru/page1.php - это внутренная ссылка при анализе сайта www.mydomain.ru? 3) "Склеивает" ли робот одинаковые ссылки при подсчете достижения 150 ссылки на второстепенной странице? 4) Автоинкрементируется ли счетчик количества ссылок при встрече в HTML-тексте страницы ссылок на текущую страницу (ссылка на якорь типа #point1 или при просмотре страницы /page1.php?query ссылка на якорь /page1.php?query#point1)? 5) "Ходит" ли Ваш робот по ссылкам, имеющим атрибут rel="nofollow"? 6) Хотя у Вас в справке и написано что отсечка срабатывает при 150 внутренних ссылок, всеже еще раз спрошу по принципу вычисления этого значения: робот при анализе страницы берет первые 150 ссылок и выделяет из них внутренние чтобы по ним дальше пойти, или он прогоняет в цикле ВСЕ ссылки страницы, а "отсечка" происходит как набралось 150 именно внутренних страниц? 7) Если на странице второго уровня стоит ссылка на страницу, которая закрыта от индексации (например, в robots.txt), эта ссылка будет учитываться при подсчете 150 внутренних ссылок текущей страницы? Буду очень благодарен за ответы на мои вопросы P.S. Столь подробное понимание принципов индексации моего сайта позволит мне более грамотно спроектировать навигацию по сайту. Хочу также отметить, что не имею желания сделать из своего проекта линкопомойку. На данным момент выставляю по 2 ссылки на странице (причем разнесенные в разные места сайта), хотелось бы при помощи увеличения количества страниц в индексе Sape сделать по 1 ссылке на странице. |
|
11.11.2009, 16:10 | #2 |
Добрый модератор
Регистрация: 09.07.2007
Адрес: глобус Украины
Сообщений: 27,600
Вес репутации: 1030
|
1. да.
2. да. 3. нет. 4. да, скорее всего. 5. нет. 6. 150 первых внутренних. 7. да. где-то так.
__________________
Правильный хостинг. В личке бесплатно не отвечаю обычно. |
11.11.2009, 17:52 | #3 |
Новичок
Регистрация: 19.03.2009
Сообщений: 19
Вес репутации: 0
|
Ок, спасибо большое за ответы!
Еще небольшой вопрос: 5.1) Робот не ходит по ссылкам с rel="nofollow". А при анализе роботом страницы увеличивается ли счетчик внутренних ссылок при обнаружении внутренней ссылки с этим атрибутом? |
11.11.2009, 17:56 | #4 |
Добрый модератор
Регистрация: 09.07.2007
Адрес: глобус Украины
Сообщений: 27,600
Вес репутации: 1030
|
да, наверное
__________________
Правильный хостинг. В личке бесплатно не отвечаю обычно. |
|
|
Похожие темы | ||||
Тема | Автор | Раздел | Ответов | Последнее сообщение |
Алгоритм добавления новых страниц сайта | EvgenJekson | Вопросы по работе системы | 2 | 25.06.2009 18:33 |
Алгоритм выдачи Sape | Администрация 6-ой палаты | Курилка | 14 | 14.06.2009 17:55 |
Поведения робота Яндекса... Каков алгоритм работы...??? | DFish | Яндекс | 15 | 07.05.2008 19:19 |
Какое максимальное время индексации сайта sape-роботом? | shtill | Вопросы по работе системы | 5 | 13.12.2007 18:44 |
Часовой пояс GMT +3, время: 05:06.