индексация сайта яндексом

[nelvin]

столкнулся с проблемой индексации моего сайта в доменной зоне .net
уже несколько месяцев жду, пока наладится поиск и всё не как(((
есть роботс.тхт есть карта сайта, роботом яндекса проиндексировано около 50 тысяч страниц, а в индексе то 300, то 15 000
исключенных страниц нету и служба поддержки ничего не может объяснить....
подскажите что делать в таких ситуациях...может были у кого-то подобные проблемы??
весь контент уник...гугл схавал его за недели 3, посещалка 15 000
а яндекс плюются так....самое интересное, что не просто не индексирует а и выкидывает страницы тоже без объяснений!!!
плз помогите, очень нужна помощь...уже сколько времени жду, пока всё наладится...
и бэклинки и есть и ПР = 3....фиг его знает, что делать

[Ken_Kaniff]

Плохая структура сайта, либо мало контента на страницах. Доменная зона не причем.
PS раз посещалка 15к (за 3 недели? не верю!) так может пофиг на этот яндекс, не?

[TStalin]

Очень внимательно проверьте роботс.тхт. Сдается мне траблы именно там...

[асдей]

Гадание на пальцах хотите или на кофейной гуще? мы могЁм
Двиг?, наполнение/контент? и самое главное ссылка на сайт...

[sidr69]

потерто

[boric]

50 тысяч страниц
весь контент уник...

Представляю, что там за контент. Если б 50 тыщ страниц были бы забиты неуникальным контентом, то можно было бы на что то надеяться. Зачем вообще делать ТАКИЕ огромные сайты. Сразу ясно, что такой свежеиспеченый сайт автоматически сгенерирован. Вы прикиньте, сколько ресурсов яндексу надо потратить на индексацию 50000 страниц... Это неделю надо пауку на нем висеть, чтобы только закачать и потом где-то порядка получаса работы целого сервера затратить на его обработку. Неудивительно, что яндекс настороженно относится к таким сайтам.

Вас могут спасти хорошие поведенческие факторы и если сайт не схож с множеством других.

Кстати, сколько страниц показывает Гугл по запросу:
site:www.vash_site.net/*
?

[superxxx]

nelvin,яндекс никогда не будет индексировать сайт нормально, если влить больше количество страниц/контента, даже со статьями по 2-5к знаков.

Если и случится чудо, и яндекс проиндексирует, то индекс будет нестабильным - страницы будут прыгать.

Надо было частями запускать страницы.

[Ken_Kaniff]

Сообщение от boric

Это неделю надо пауку на нем висеть, чтобы только закачать и потом где-то порядка получаса работы целого сервера затратить на его обработку.

У меня гугл до 30к страниц в день загружает, это только на одном сайте. Яндекс 30к может за один ап в индекс добавить.

[boric]

Ken_Kaniff,

У меня гугл до 30к страниц в день загружает, это только на одном сайте. Яндекс 30к может за один ап в индекс добавить.

Да, ошибся. Теоретически достаточно суток, если по 2 сек на страницу отводить. Плюс полчаса-час на предварительную обработку контента, плюс лишние данные в индндексе, плюс место на диске и т.д. Т.е. это существенные ресурсы. Я просто сам сталкивался с разработкой поисковой системы и знаю о многих проблемах, лежащих на поверхности. Например если тупо в лоб создавать обратный индекс, то для 60 тысяч документов получается таблица на 30 миллионов строк, а с такой таблицей работать уже не просто, особенно в mysql. И если эти данные не востребованны (см. поведенческие факторы), то лучше от них избавиться полностью или частично. У них конечно наверняка своя собственная система узкоспециализированная хранения данных, но все равно нет смысла впустую тратить ресурсы на эти данные.