Яндекс шалун :)

[Kaif]

big.bon, ок спасибо...

[MasterV]

Сообщение от tse

По сабжу- БигБон, Вы в своем подходе модифицируете урл и выдаете ту страницу, которая была бы без "подлого" дополнения детектора продажности. В целом, это неверно. Более верно выдавать Error404 при обнаружении нештатного вида урла.

+1 Единственная здравая мысль во всем топике.
Изменение или добавление даже одного символа в УРЛе должно неминуемо вести на 404 ошибку, или в крайнем случае, по 301 редиректу на главную сайта. Все остальное от лукавого
Предложенный способ (эта тема переодически баянится уже больше года) дает Яше повод для "бани" за дублирование контента и еще одну возможность подтвердить, что сайт продает ссылки.
ИМХО, при наличии других "минусов" у сайта, с точки зрения ПС, это может быть расценено как еще один минус и как следствие - штрафные санкции.

[big.bon]

MasterV, мегажесть! банить сайт за две одинаковые страницы на сайте, последняя из которых является вымошленной поисковой системой?

[MasterV]

Сообщение от big.bon

MasterV, мегажесть! банить сайт за две одинаковые страницы на сайте, последняя из которых является вымошленной поисковой системой?

Вы меня не поняли. Мы смотрим на одну вещь с разных точек зрения.
Вы убеждены, что Яша сам подставляет что-то в УРЛ.
Я убежден, что Яша сам ничего никому не подставляет. Основание для этого - переодическое просматривание серверных логов 14-ти сайтов (7 продают ссылки).

Приведенный вами пример с присоединением символа ? - это, либо ошибка на вашем сайте, либо кто-то подсунул Яше такую ссылку. Ank уже говорил про это.

Так вот, если сделать фичу с выдачей одной и той-же страницы по разным УРЛам и скормить эН-ное количество таких страниц Яше, то Яша будет ходить по всем таким "подстановочным" УРЛам и видеть одну и туже страницу. Вы понимаете о чем я?

Конкурент кинет в аддурилку 100 ссылок на одну страницу с приставками к УРЛу в виде "?", ?blabla=1, ?blabla=2, ... и т.д. и Яша увидит ВСЕ 100 страниц. То-то он обрадуется!
Хорошо, если просто их склеит, но может ведь и бан повесить... Нет?

Все это конечно мое ИМХО, и о реальных действиях Яши можно только гадать, но, в чем я твердо убежден, так это в том, что Яша самостоятельно никому ничего к УРЛам не добавляет. А уже неоднократно приводимый способ "защиты" ссылок - палка о двух концах.

[big.bon]

MasterV, вы посмотрите логи от даты первого поста этого топика. Думаю Вам будет интересно - я тоже не с проста написал топик - было больше 140 сайтов из сетки с подобным симптомом.

[Йода]

MasterV, чую почерк Каширина Помницца, он на одном из своих семинаров рассказывал о "работе" с сайтами конкурентов Поразительно, как много сайтов отдают по несуществующему урлу что угодно, кроме 404ой..

[Anatoly]

Сообщение от tse

Поразительно, как много сайтов отдают по несуществующему урлу что угодно, кроме 404ой..

А с другой стороны, они и не обязаны это делать. Если бы на самом сайте стояли несуществующие корявые ссылки - это да, плохо. А если злоумышленник где-то проспамил - при чём тут сайт?

[MasterV]

Сообщение от Anatoly

Если бы на самом сайте стояли несуществующие корявые ссылки

Причем тут "стояли на сайте"? Есть панель аддурл, также может быть ссылка с другого сайта на "корявый" УРЛ, а если этот "корявый" УРЛ отвечает 200, значит страница присутствует на сайте. Нет?
Неужели про иКсэCэC не слышали, про ссылки с вэбалайзер и прочую хрень?
Некоторые ВМ и половины ссылок не знают, которые у них в индексе болтаются и радуются блаженные: "А у меня Яша еще 100 страниц нашел, а я ничего не делал".

Сообщение от Anatoly

если злоумышленник где-то проспамил - при чём тут сайт?

Ну, вы даете! При чём тут сайт? А при том, что "спасение утопающих - дело рук самих утопающих" (с) О.Бендер

Сообщение от Anatoly

они и не обязаны это делать

Защита сайта - дело рук вебадмина и никого более! Он и только он ОБЯЗАН залатать все дырки на своем сайте. Никто за вебадмина этого делать не будет и уж тем более не ПС!

[seocore]

Сообщение от MasterV

Неужели про иКсэCэC не слышали, про ссылки с вэбалайзер и прочую хрень?
Некоторые ВМ и половины ссылок не знают, которые у них в индексе болтаются и радуются блаженные: "А у меня Яша еще 100 страниц нашел, а я ничего не делал".

верно говоришь, многие DLE держатели всерьез радуются росту индекса их сайтов и не обращают внимания, что рост за счет /user/логин страничек, на некоторых ГСах смотришь, аж под 10к исходящих ссылок (неоплачиваемых), чему могут позавидовать только жирные каталоги

Сообщение от MasterV

Защита сайта - дело рук вебадмина и никого более! Он и только он ОБЯЗАН залатать все дырки на своем сайте. Никто за вебадмина этого делать не будет и уж тем более не ПС!

а тут не согласен, это поисковику нужно бороться за чистоту выдачи, если поисковик начинает применять санкции к сайтам, у которых XSS дыры, то выдача с каждым днем будет хуже и хуже... (хотя собственно это и наблюдается, очень много форумов зафильтровано за ссылки на нехорошие сайты, при этом это авторитетные форумы и там мног полезной информации)

PS: флаг яндексу в руки, а пока "титаник" не потонул, надо от него отплывать в сторону буржунета

[старовер]

Коллеги!
PHP код вида

$uri = getenv('REQUEST_URI');
$pos = strpos($uri, '?');
if ( $pos ) $uri = substr($uri,0,$pos);
$opt['request_uri'] = $uri;


есть плохо.
Вот это будет лучше:

$opt['request_uri'] = preg_replace ("/\?.*?$/", "", $_SERVER['REQUEST_URI']);

Для статичных адресов он обрежет uri начиная с первого знака ? и до конца строки.