Добавьте ручное добавление страниц
 

Как я заметил, автоиндексация роботом работает не на 100% (у меня например, у одного сайта проиндексировано 1/5000 страниц).

Пока робот не развился, может стоит добавить функцию ручного добавления страниц?

Пусть пользователи добавляют урлы страниц к своей площадке а скрипт проверяет их данные...

Конечно, это очень долго, но не обязательно добавлять все - достаточно будет добавить несколько страниц с высоким PR.

Пусть даже эта услуга будет платной (по несколько центов за страницу), думаю желающие воспользоваться ей будут...

А так же будет полно желающих завались супорт письмами с жалобами, что их страницы не индексируются, а на деле они будут 333 уровня вложения и т.д.

в целом задумка небезинтересная , но геморройная по реализации, просто хотя бы с точки определения уровня вложенности

для каждой страницы придется зверски лопатить сайт...

А уровень вложенности - это что, самый главный показатель качества индексации страницы? Мне кажется не стоит так крепко привязываться к нему. Да, начальную индексацию можно делать на два клика от морды, просто чтобы робот не задолбался большие сайты лопатить, но добавление более далеких страниц крайне необходимо. Ведь и дальше двух кликов от морды есть жизнь на сайтах. Вот например большой сайт, больше 50к страниц в яндексе, индексер берет в сутки до 10к страниц, а в систему и 2к страниц не попало. Потенциал сайта очевидно использован не полностью.

Вообщем хотя бы ручную добавлялку нужно, и пофиг, какой уровень вложенности страницы, главное, чтобы проиндексированна была.

Посмотрите под другим углом, до 3-го ур-ня вложения поисковый робот индекст гораздо быстрее, чем скажем 5-ый уровень вложения, на такие и гошин не часто ходит, а возьмём раму.. она бедолага и на 2-ом находит чорте когда а глубже вообще задница.
Имхо, если нужен скорейший результат, то не нужно дальше третьего ур-ня забираться.

Ручная добавлялка = гемор 100%, хотя бы потому что модераторам в любом случае придется просматривать каждую добавленную вручную страницу - мало ли что там надобавляли. Сейчас модераторы в состоянии справиться с этой задачей только потому-что есть ограничение на частоту переиндексации площадки + в любом случае глубже 3-го уровня робот ничего не "съест" и из-за этого снижается вероятность попадания "помоев" в систему. А с появлением "ручной добавлялки" нам придется 1000 китайцев нанять для модерации.

Согласен, гемор будет если сделать услугу бесплатной.
Но если установить стоимость 1 доллар за страницу, то желающих будет совсем мало, и старания модераторов будут тем самым оплачены с лихвой.
Да и люди не будут всё попало добавлять, так как если страница левая, то проверку не пройдет а доллар уйдет.
Если сложно определить уровень вложенности, то пусть уровень вложенности у добавленной страницы будет со статусом "неизвестно".

Еще вариант - для того, кто торопится проиндексировать сайт целиком, пусть будет услуга "переиндексация сайта вне очереди" (например, за 5-10 у.е.). Но в таком случае, конечно будет куча жалоб в случае, если робот по прежнему будет индексировать 1-10 страниц.