SMF и подлянка с индексацией.

[Апокалипсис]

Стоял у меня себе форум. SMF 1.1.3.
Яндекс скушал 100 000 страниц.
В индекс попадало до 20 тыс.. ну нормально думаю.
Потом вдруг резко пошло 10 тыс, - 5 тыс..
Начал анализировать и нашёл что на страницах некоторых присутствует подлянка в виде:

<meta name="robots" content="noindex" />

выяснилось что это типа специально чтобы одинаковый контент не индексился, но это очень плохо влияет на ботов.
Вот так вот
Лечится:
В файле Themes\index.template.php убрать вышеуказанный код.

Обладатели SMF, будте осторожны!

[Fredy314]

А как-же оно с ноиндексом вообще попало в яндекс?

[Апокалипсис]

Fredy314, не на всех страницах.
а на страницах дальше УВ3 - почему то такой тэг есть..

Добавлено через 2 минуты
и в коде
empty($context['robot_no_index']) ? '' : '
т.е. если пустая переменная ничего, а если не пустая, выводится ноуиндекс..

[color_18]

стоит у меня форум СМФ 1.1.3 нормально индексировался, ноидексов нигде нет, может у вас шаблон не стандартный, там и напутал создатель шаблона ?

[Апокалипсис]

color_18, шаблон обычный.
Вот что я нагуглил:

http://209.85.129.132/search?q=cache...u&ct=clnk&cd=1

Кэш гугля, исходная страница не открывается.

Добавлено через 52 секунды

По задумки авторов он должен закрывать дублирующие ссылки форума.
Но на практике боты наткнувшись на него просто уходят не захватывая контент с разрешённых страниц

вот..

[Fredy314]

Да без разницы где ноиндекс, я про то что если страница попала в яндекс, но на ней вероятно небыло ноиндекса.

Яндекс скушал 100 000 страниц.
В индекс попадало до 20 тыс.. ну нормально думаю.
Потом вдруг резко пошло 10 тыс, - 5 тыс..

Значит ноиндекс появился потом и поэтому страницы начали выпадать?

[Апокалипсис]

Fredy314, угу, он начал появлятся на топиках которые ушли за УВ3
я ещё не раскурил как он определяет..