Неверная индексация площадок

[nulelemon]

Хочу попросить администрацию разобраться в ситуации.
Не в первый раз замечено, что не полностью проиндексированы(переиндексированы) сайты.

Один из сайтов на WP, другой на Cmsimple, код вставлен в шаблон и проблем быть не должно!

На обращение в техподдержку получаю ответ в стиле Платона Щукина:

Здравствуйте, Возможные причины неиндексации страниц вашего сайта нашим роботом описаны здесь http://sape.ru/faq.php?q_id=185
Так же вы можете сообщить нам урл страницы, которая не добавилась, мы проверим.

Ребяты, если из 800 страниц, проиндексированных Яндексом, мудрый Сапоробот нашел только 200, мне искать и сообщать урлы 600 страниц?

ID площадок 359624 и 385767

Надеюсь на успешное решение проблемы!
Спасибо.

[Ank]

Сообщение от nulelemon

Так же вы можете сообщить нам урл страницы, которая не добавилась, мы проверим.

ну найдите пару, и покажите.

Сообщение от nulelemon

если из 800 страниц, проиндексированных Яндексом

Это не критерий ни разу. Сапа не видит более 2х кликов от главной.

[nulelemon]

Сапа не видит более 2х кликов от главной

В обоих случаях на морде стоит сайтмап, так что в любом случае робот должОн все видеть!

ну найдите пару, и покажите.

Можно в личку или как?

[Grush]

Сообщение от nulelemon

В обоих случаях на морде стоит сайтмап, так что в любом случае робот должОн все видеть!

В сайтмапе сколько урлов?

[nulelemon]

В сайтмапе сколько урлов?

В одном случае ок.200, в другом - 800. Шо, это таки много?

[Grush]

Сообщение от nulelemon

В одном случае ок.200, в другом - 800. Шо, это таки много?

Курите фак

Добавлено через некоторое время
Второй пунктик ваш )

Если проиндексировались не все страницы 2-го и 3-го уровня, это может быть по ряду причин:

1) Сайт плохо отвечал и по тайм-ауту наш робот получил не все страницы (самое страшное если, например, главная не полностью скачалась им и он нашел только пару внутренних ссылок с нее - в этом случае он будет искать установленный код только по той ветке, на которую ссылаются эти страницы)
2) Неверная структура - например, кто-то решил вывалить километровую карту сайта, чтобы за счет нее целиком вогнать сайт в систему и поставил ссылку на нее с главной. Но у нашего бота есть ограничение по кол-ву внутренних ссылок, по которым он переходит дальше. Для главной - 500, для 2-го уровня - 150.
3) Страницы закрыты в robots.txt
4) Страницы закрыты от индексации в метатегах
5) Код системы расположен в неиндексируемой зоне документа ( в блоках noindex, script или комментариях)
6) Просто неверно установлен код
7) Действительно у сайта какой-то мегаособенный движок и на нем наш бот почему-то затыкается.

Как показывает практика, наиболее частые ситуации №№1, 5 (многие случайно где-то забывают noindex закрыть и из-за этого не индексируется)
Ситуация №7 встречается крааайне редко.

[Ank]

nulelemon, кроме покурки фака - сайтмап - это уже 2УВ. Или все 800 на роже? тогда ждите массового ГБЛ

[nulelemon]

Ага! Вот где собака порылась. Каюсь, я почему-то думал об ограничении в 1000 урлов! Ладно, учтём-с!

Добавлено через 1 минуту
Ank, не-не-не! 800 на морду - это бы вообще был бы перебор! :-D

[fomas]

Добавил площадку, проиндексировано всего 7 страниц. В чем причина?

[Grush]

http://forum.sape.ru/showpost.php?p=424065&postcount=6