Разрабатываю индексацию страниц
 

Прошу совета! Какие предложения у Вас есть!?
Разрабатываю региональный поиск!

Функции моего бота:
1. бот всегда добавляет доп. параметр.. в индексируемую страницу ( не подходит один, он перебирает другие варианты)
2. бот пришел не увидел прежнего содержания (т.е. контекст сохранился, а добавились ссылки) - идет игнор, кроме содержания самого текста


Для рег. поиска еще важно определить территорию.. но это решаемо!

Кроме того, насколько важен собственный поиск? хотя конечно есть желание более-менее нормальную выдачу для этого сделать.

Pulse Новый конкурент яши :)

пульдекс или пульгл :)

Вы не по адресу обратились.. Сомневаюсь, что тут есть программеры в этой области..
Здесь вы только такие ответы получите:

в лучшем случае :)

Попробуй парсить js и swf.

ну тогда уж и flv до кучи. чтоб, например, ищешь по видео или картинкам, набираешь "клёвые тёлки", робот просматривает содержимое изображений и видеофайлов (не текста в тегах!) на предмет клёвых тёлок (не коров! :) ), и выдаёт результат. ещё пофантазируем? :rolleyes::D

кстати мне уже попадался поисковик по видео содержанию, т.е сравнивается не посредственно видео с тем что имеется в базе данных, а вот как это реализавано я не знаю... :( судя по всему за этим будущее, так что народ задумайтесь..
а еще китайцы пытаются сделать голосовой интернет, где сайты голосовые...

Обязательно: параллельно бот парсит сапу на наличие сайта в ней. Если обнаружено - игнора ссылок нет, все ссылки учитываются в ранжировании. Текст страницы в таком случае можно не учитывать, как второстепенный фактор.

Определите сначала приоритеты.
Если Вы делаете поиск для себя в качестве развлечения, делайте то что интересно.
Если делаете поиск для пользователей, подумайте что бы им понадобилось, чего еще нет.
Если делаете поиск ради денег, подумайте как привлечь к этому и чем зацепить рекламодателей/инвесторов.