Шуточки яндекса. Помогите разобраться!

[gvv3]

Только что сел за комп, смотрю на одном сайте повалил в 2 раза больший трафик чем обычно.

Смотрю в яндекс.вебмастер:
Загружено роботом - 8354
Страниц в поиске - 3943

Но блин, на сайте нет столько страниц.
Number of URLs in this sitemap: 2826
В сайтмапе включены все страници сайта.
Боюсь, что еще придумает яндекс при следующем апе!

Где косяк, у меня или яндекса?

[Последний Герой]

Сообщение от gvv3

Где косяк, у меня или яндекса?

проверьте в индексе наличие подоюных страниц "?debil"

[Invasion]

Косяк Гоша скурил

[gvv3]

Я вообще в шоке, еще появилось в яндекс.вебмастер около 20 новых сайтов ссылающихся на мой сайт (почти все на народ.ру). Ссылок не покупал. При осмотре страниц которые ссылаются, ссылок на мой сайт нет!

[cataev]

gvv3, посмотрите хтмл ссылающихся сайтов. посмотрите, на какие страницы вашего сайта они ссылаются. внимательно посмотрите на хтмл этих страниц вашего сайта. откройте ваш сайтмап и посмотрите, что там за новые страницы.

если все чисто - не парьтесь

[gvv3]

Короче косяк яндекса.
В robots.txt прописано
Disallow: /user/register
Disallow: /user/password
Disallow: /user/login

А это падло мне проиндексировало то, что не нужно:

Структура сайта с точки зрения робота Яндекса. Показаны подразделы, содержащие более 10 страниц и занимающие более 1% от общего числа загруженных страниц.
Раздел Загружено страниц Доля (%)
user/ 3672 44,0
login? 1835 22,0
register? 1836 22,0

[Последний Герой]

Сообщение от gvv3

В robots.txt прописано
Disallow: /user/register
Disallow: /user/password
Disallow: /user/login

секция User-agent: Yandex есть? если есть то и в ней должно быть прописано это

[gvv3]

Сообщение от Последний Герой

секция User-agent: Yandex есть? если есть то и в ней должно быть прописано это

у меня не один сайт, а много. Такой косяк впервые, и только на одном сайте!
Роботс.тхт настроен правильно!

[Последний Герой]

Сообщение от gvv3

Роботс.тхт настроен правильно!

засветите его полностью или не спорьте

[gvv3]

User-agent: *
Crawl-delay: 10
# Directories
Disallow: /includes/
Disallow: /misc/
Disallow: /modules/
Disallow: /profiles/
Disallow: /scripts/
Disallow: /sites/
Disallow: /themes/
# Files
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
# Paths (clean URLs)
Disallow: /admin/
Disallow: /comment/reply/
Disallow: /contact
Disallow: /logout
Disallow: /node/add
Disallow: /search/
Disallow: /user/register
Disallow: /user/password
Disallow: /user/login
# Paths (no clean URLs)
Disallow: /?q=admin/
Disallow: /?q=comment/reply/
Disallow: /?q=contact/
Disallow: /?q=logout/
Disallow: /?q=node/add/
Disallow: /?q=search/
Disallow: /?q=user/password/
Disallow: /?q=user/register/
Disallow: /?q=user/login/
Host: *****.com