Разрабатываю индексацию страниц

[lerose]

Сообщение от админ

пульдекс или пульгл

Скорее Яхуль

[formalist]

Если ТС это делает из-за бабок, то по-кентовски советую забить на это дело быстрее и задвинуть в дальний ящик.
И дело тут не в реализации, а в авторском/лицензионном и другом дебилизме, которое запрещает в любом виде юзать/сохранять/кэшировать/показывать/транспортировать/продавать/обрабатывать/и т.д.
И как только это дело нарисуется, сразу и закроется с убытками.

Единственный вариант - это грузить свой серв/кластер, забивать диск, индексировать инет и предоставлять это все дело страждущим нахаляву, т.е. даром проставлять баклинки на всех кого надыбаешь в инете.

З.Ы. Тады название рекомендую - Пульсава или Хапулься.

[shadx]

Ищем мануалы, по теории поиска. Долго их курим.
Изучаем выдачу основных поисковиков Я и Г (например). Сидим думаем.
Далее ставим задачу "Зачем это надо???" и "Что оно мне даст!!!".
По идее больше вопросов не должно остаться.

[Tatul]

Сообщение от shadx

Зачем это надо???" и "Что оно мне даст!!!".

После долгого курения данных вопросов, забиваем на всё это и начинаем толкать ссылки в сапе.
Ибо легче убить себя чем сделать новый поисковик, бабла немеряно надо..., да и последние вялые попытки нам показали, к чему это привело.
Убийцы Яндекса уже курят)