Подмена страниц площадки на ссылки keygenguru.com. Много ERROR в SAPE.

Birigan · 31.08.2011, 09:38

Анамнез:

Вот уже несколько месяцев площадка в SAPE время от времени вдруг начинает пестрить ERROR-ами. ERROR Статус всегда один и тот же - «ссылка не найдена на странице или размещена вне тегов «body» или «html»» Однако, если открыть соответствующую страницу в браузере - ссылки на ней присутствуют. Несколько раз обращался за помощью к техподдержке, где не удавалось выяснить реальную причину, (в основном посылали читать FAQ). В течении дня все ссылки из статуса ERROR переходят обратно в статус OK до тех пор пока через случайный промежуток времени (обычно несколько дней) все не повторяется снова.

Также было замечено, что иногда при просмотре в браузере площадка отдает пустую страницу с каким либо 4 значным выражением например вот так «20a3». К сожалению современные браузеры при просмотре кода страницы больше не выдают код именно той страницы которую вы получили только что, а запрашивают этот код по новой с сервера. Так поступает google chrome. *Поэтому все это время при просмотре кода - выводился обычный код страницы и создавалось впечатление, что имеет место какой-то локальный глюк. Но в какой-то момент все же удалось увидеть содержимое. (см. принтскрин)
Тогда стало понятно, что сервер заражен и какой-то вредноносный код подменяет страницы сайта на блок рекламных ссылок. Идея блестящая. Подмена происходит в 99% случаев лишь для ботов, но не для пользователя. Поэтому сразу так засечь и не получалось. Одновременно стало понятно почему SAPE ругается имеенно «ссылка не найдена на странице или размещена вне тегов «body» или «html»» - ссылки оптимизатора в этом коде нет! И это было бы пол беды...

Основная проблема скрывается глубже. Когда робот SAPE заходит на площадку с ежедневной проверкой, он получает вместо реальной страницы площадки - подмененную страницу с кучей ссылок, и эти ссылки робот записывает в базу, как ссылки, имеющиеся на странице площадки. В то время как ссылки оптимизаторов реально размещенные на площадке - получают статус ERROR. Выглядит это так:

Если же вы кликните на число обозначающие количество этих самых левых ссылок то увидите что SAPE робот отлично переваривает подмененную страницу:

дубль два:

Но может с равной долей вероятности и повезти:

Вероятность эта наблюдается в течении произвольного периода времени, затем аномалия проходит и никак себя не проявляет несколько дней. Чаще всего все ссылки возращаются из статуса ERROR в статус OK в течении дня. То есть аномалия длится меньше суток.

Однако... Последствия не заставляют себя ждать. Многие оптимизаторы выкупая ссылки с площадок в настройках рекламной компании указываю опцию "снимать ссылки если количество ссылок на площадке превысило: 5" (ну или даже 4, кто как устанавливает). Это логично, потому что ценность купленной ссылки резко падает когда она находится в окружении 75 других ссылок. И такая ссылка не нужна оптимизатору. Следовательно, каждая активация паранормальной активности на зараженной площадке, вызывает эффект «веерного отключения» - ссылки просто снимаются. Площадка теряет профит. Фактически речь идет о том, что вредноносный код, заразивший площадку не такой уж безобидный, как может показаться вначале.

В интернете об этой аномалии можно почитать перейдя по ссылкам: http://tools.sucuri.net/?page=tools&...97007b56bea2b4, https://badwarebusters.org/main/itemview/17868, http://www.linuxquestions.org/questi...ervals-768943/, http://www.google.com/support/forum/...5d5f3d9c&hl=en.

СОБСТВЕННО ПРЕДЛОЖЕНИЕ

Раз уж это, не единичная проблема, было бы неплохо, чтобы в SAPE о ней узнали, и добавили своему роботу интелекта, чтобы он мог понимать ситуацию лучше чем просто «ссылка не найдена на странице или размещена вне тегов «body» или «html»» А своевременно сигнализировал вэбмастеру о возможном заражении площадки. Думаю, что алгоритм поведения робота в данном случае достаточно прост.

Aeternus · 31.08.2011, 10:13

Я тоже давно заметила, что ссылки то вылетают в эрор, то возвращаются обратно в течении одного дня. При этом смотрела на сайте - стоят, посмотрела в коде (мало ли вдруг noindex кто поставил, недавно было такое) - все нормально. Теперь все прояснилось.. Наверное, честность нынче не в моде, нужно обязательно кого-то повертеть за нос.

Ank · 31.08.2011, 11:01

Цитата:

Сообщение от Birigan

СОБСТВЕННО ПРЕДЛОЖЕНИЕ

я правильно понял, что функции антивируса, антиддоса и просто, напоминалка о проплате домена - тоже забота сапы? Хакнули - лечитесь. Не можете - спрашивайте. В спецтеме я вас не помню, значит сами все знаете.

Aeternus, чего сказали то? так, постов понабивать?

zhegloff · 31.08.2011, 11:02

Цитата:

Сообщение от Birigan

Раз уж это, не единичная проблема, было бы неплохо, чтобы в SAPE о ней узнали, и добавили своему роботу интелекта, чтобы он мог понимать ситуацию лучше чем просто «ссылка не найдена на странице или размещена вне тегов «body» или «html»» А своевременно сигнализировал вэбмастеру о возможном заражении площадки. Думаю, что алгоритм поведения робота в данном случае достаточно прост.

сапа - не антивирус.

Aeternus · 31.08.2011, 11:15

Ank, а Вы всем новичкам на форуме задаете этот вопрос? Не очень вежливо с Вашей стороны, не зная человека, сразу же писать такой вопрос в лоб, как говорится. Если бы я хотела набить постов, я бы уже полгода их набивала. Я за этим никогда не гонялась, мне это совершенно не нужно. И что у Вас на форуме пишут только "избранные"?

Ank · 31.08.2011, 11:30

Цитата:

Сообщение от Aeternus

у Вас на форуме пишут только "избранные"?

нет. Пишут все. Но посты не по делу вызывают однозначную реакцию. Я потому и спросил - о чем был пост? В отличие от этого - тот непонятен ниразу.

Aeternus · 31.08.2011, 11:39

Цитата:

Сообщение от Ank

нет. Пишут все. Но посты не по делу вызывают однозначную реакцию. Я потому и спросил - о чем был пост? В отличие от этого - тот непонятен ниразу.

Чем же он непонятен? Тем, что я также видела подобную проблему, не знала, в чем причина, а данный пост дал мне развернутую информацию об этом?

А насчет "постов не по делу", извините, если это покажется грубостью или хамством, но я читаю Ваш форум давно и таких "постов" видела достаточно, особенно от "элиты форума", и при этом все довольны.

Birigan · 31.08.2011, 11:40

Цитата:

Сообщение от Ank

я правильно понял, что функции антивируса, антиддоса и просто, напоминалка о проплате домена - тоже забота сапы? Хакнули - лечитесь. Не можете - спрашивайте. В спецтеме я вас не помню, значит сами все знаете.

У вас сегодня видимо настроение плохое? Я не просил функций антивируса, напоминалки о проплате домена или антиддоса. Да, пролечиться не получается пока, я не специалист - тут вы угадали. Поэтому если есть что посоветовать - буду вам признателен. А предложил я вам всего лишь расширить функции вашего робота. Если вы считаете данную функцию бесполезной - дело ваше, я не настаиваю и не убеждаю вас что она необходима. Будьте по спокойнее хотя бы в разговоре.

отченаш · 31.08.2011, 11:51

Это явный вирус который периодически подменяет страницы для роботов. Проверяйте свой сайт. Сапа тут не причем. Я уже с таким сталкивался.

Ank · 31.08.2011, 12:02

Цитата:

Сообщение от Aeternus

я также видела подобную проблему

для решения подобных проблем есть ОГРОМНАЯ тема. Там обычно все и находиться легко и непринужденно.
И если обнаружиться вирус - то кроме совета "лечить" - никто не поможет. Правда на форуме гора умельцев, за пару(пяток, десяток) баксов - все вылечат.

Цитата:

Сообщение от Birigan

расширить функции

возложить на него функции антивируса?
Сколько брать с ВМ денег за них? Готовы платить?

31.08.2011, 09:38	#1
Birigan Новичок Регистрация: 25.03.2010 Сообщений: 57 Вес репутации: 173	Подмена страниц площадки на ссылки keygenguru.com. Много ERROR в SAPE. Анамнез: Вот уже несколько месяцев площадка в SAPE время от времени вдруг начинает пестрить ERROR-ами. ERROR Статус всегда один и тот же - «ссылка не найдена на странице или размещена вне тегов «body» или «html»» Однако, если открыть соответствующую страницу в браузере - ссылки на ней присутствуют. Несколько раз обращался за помощью к техподдержке, где не удавалось выяснить реальную причину, (в основном посылали читать FAQ). В течении дня все ссылки из статуса ERROR переходят обратно в статус OK до тех пор пока через случайный промежуток времени (обычно несколько дней) все не повторяется снова. Также было замечено, что иногда при просмотре в браузере площадка отдает пустую страницу с каким либо 4 значным выражением например вот так «20a3». К сожалению современные браузеры при просмотре кода страницы больше не выдают код именно той страницы которую вы получили только что, а запрашивают этот код по новой с сервера. Так поступает google chrome. *Поэтому все это время при просмотре кода - выводился обычный код страницы и создавалось впечатление, что имеет место какой-то локальный глюк. Но в какой-то момент все же удалось увидеть содержимое. (см. принтскрин) Тогда стало понятно, что сервер заражен и какой-то вредноносный код подменяет страницы сайта на блок рекламных ссылок. Идея блестящая. Подмена происходит в 99% случаев лишь для ботов, но не для пользователя. Поэтому сразу так засечь и не получалось. Одновременно стало понятно почему SAPE ругается имеенно «ссылка не найдена на странице или размещена вне тегов «body» или «html»» - ссылки оптимизатора в этом коде нет! И это было бы пол беды... Основная проблема скрывается глубже. Когда робот SAPE заходит на площадку с ежедневной проверкой, он получает вместо реальной страницы площадки - подмененную страницу с кучей ссылок, и эти ссылки робот записывает в базу, как ссылки, имеющиеся на странице площадки. В то время как ссылки оптимизаторов реально размещенные на площадке - получают статус ERROR. Выглядит это так: Если же вы кликните на число обозначающие количество этих самых левых ссылок то увидите что SAPE робот отлично переваривает подмененную страницу: дубль два: Но может с равной долей вероятности и повезти: Вероятность эта наблюдается в течении произвольного периода времени, затем аномалия проходит и никак себя не проявляет несколько дней. Чаще всего все ссылки возращаются из статуса ERROR в статус OK в течении дня. То есть аномалия длится меньше суток. Однако... Последствия не заставляют себя ждать. Многие оптимизаторы выкупая ссылки с площадок в настройках рекламной компании указываю опцию "снимать ссылки если количество ссылок на площадке превысило: 5" (ну или даже 4, кто как устанавливает). Это логично, потому что ценность купленной ссылки резко падает когда она находится в окружении 75 других ссылок. И такая ссылка не нужна оптимизатору. Следовательно, каждая активация паранормальной активности на зараженной площадке, вызывает эффект «веерного отключения» - ссылки просто снимаются. Площадка теряет профит. Фактически речь идет о том, что вредноносный код, заразивший площадку не такой уж безобидный, как может показаться вначале. В интернете об этой аномалии можно почитать перейдя по ссылкам: http://tools.sucuri.net/?page=tools&...97007b56bea2b4, https://badwarebusters.org/main/itemview/17868, http://www.linuxquestions.org/questi...ervals-768943/, http://www.google.com/support/forum/...5d5f3d9c&hl=en. СОБСТВЕННО ПРЕДЛОЖЕНИЕ Раз уж это, не единичная проблема, было бы неплохо, чтобы в SAPE о ней узнали, и добавили своему роботу интелекта, чтобы он мог понимать ситуацию лучше чем просто «ссылка не найдена на странице или размещена вне тегов «body» или «html»» А своевременно сигнализировал вэбмастеру о возможном заражении площадки. Думаю, что алгоритм поведения робота в данном случае достаточно прост.

Похожие темы
Тема	Автор	Раздел	Ответов	Последнее сообщение
Сделать много-много страниц второго уровня	Artifex	Вопросы от новичков	25	13.03.2010 01:15
Почему на новые площадки много заявок?	akella_	Вопросы от новичков	12	19.02.2010 09:42
Подмена ссылок в коде sape	droun	Курилка	8	07.12.2009 19:39
Много Error-ов	tony75	Вопросы по работе системы	1	21.04.2009 17:21
Возможно ли вебмастеру запретитить роботу sape индексацию части страниц площадки?	bistry	Вопросы по работе системы	2	27.06.2007 10:27

31.08.2011, 10:13	#2
Aeternus Новичок Регистрация: 10.11.2010 Сообщений: 13 Вес репутации: 0	Я тоже давно заметила, что ссылки то вылетают в эрор, то возвращаются обратно в течении одного дня. При этом смотрела на сайте - стоят, посмотрела в коде (мало ли вдруг noindex кто поставил, недавно было такое) - все нормально. Теперь все прояснилось.. Наверное, честность нынче не в моде, нужно обязательно кого-то повертеть за нос.

31.08.2011, 11:15	#5
Aeternus Новичок Регистрация: 10.11.2010 Сообщений: 13 Вес репутации: 0	Ank, а Вы всем новичкам на форуме задаете этот вопрос? Не очень вежливо с Вашей стороны, не зная человека, сразу же писать такой вопрос в лоб, как говорится. Если бы я хотела набить постов, я бы уже полгода их набивала. Я за этим никогда не гонялась, мне это совершенно не нужно. И что у Вас на форуме пишут только "избранные"?

31.08.2011, 11:51	#9
отченаш Новичок Регистрация: 22.12.2008 Сообщений: 50 Вес репутации: 0	Это явный вирус который периодически подменяет страницы для роботов. Проверяйте свой сайт. Сапа тут не причем. Я уже с таким сталкивался.