Защита сайта от АГС при продаже ссылок

[VAU]

Сообщение от kosta_kot

Робот пройдет по всем папкам и глянет что там за файлы.

Робот пройдет только по папкам, на которые есть ссылки. Во все остальные он попасть и посмотреть что там лежит (не зная полного url) никак не сможет. Если конечно руки у ВМ не кривые.

[kosta_kot]

Еще недавно нашел биржу, которая свой код для вставки на сайт создала по типу Директа и утверждает, что это не позволит ПС определить продажность ссылки. У меня сразу возник вопрос к программистам Sape: ваше отношение к такому подходу, действительно ли это спасет? Анализировали ли вы это и собираетесь ли вы изменять код вставки и менять схему размещения ссылок?
Обращу еще раз ваше внимание! Поможет ли такой способ спутать карты поисковым системам?

[WEB-Master]

Сообщение от kosta_kot

Подбирать даже не надо. Если робот нашел файл с названием sape.php или другой файл той или иной биржи, то уже все ясно и сложный алгоритм писать не надо. Поэтому прятать глубже нет смысла. Робот пройдет по всем папкам и глянет что там за файлы.

вы демонстрируете полное незнание принципов работы интернета... давайте выведете мне все файла и папки например сайта sape.ru... а не сможете, потому что если в папке есть файл index.php, index.html, index.htm и так далее, вывести её содержимое НЕВОЗМОЖНО... только перебором возможный комбинаций и чтобы подобрать 32-х символьное название папки сапе нужно ой как много попыток (что хостинг ляжет), времени и нереальных ресурсов со стороны яндекса... так что не говорите про то в чем не разбераетесь!

Добавлено через 4 минуты

Сообщение от kosta_kot

Поможет ли такой способ спутать карты поисковым системам?

не поможет, это чистый маркетинг... ссылки в контекстной рекламе выводятся через яваскрипт и реально не присутствуют на странице, а ссылки через ту биржу выводятся также как и через сапе, просто оформлены под рекламу.

[VAU]

Сообщение от kosta_kot

код для вставки на сайт создала по типу Директа

В каком смысле? Если на скриптах, так это вообще не индексируется.

Сообщение от kosta_kot

определить продажность ссылки

Суждение, которое всегда можно оспорить.

[kosta_kot]

Сообщение от WEB-Master

вы демонстрируете полное незнание принципов работы интернета... давайте выведете мне все файла и папки например сайта sape.ru... а не сможете, потому что если в папке есть файл index.php, index.html, index.htm и так далее, вывести её содержимое НЕВОЗМОЖНО... только перебором возможный комбинаций и чтобы подобрать 32-х символьное название папки сапе нужно ой как много попыток (что хостинг ляжет), времени и нереальных ресурсов со стороны яндекса... так что не говорите про то чем не разбераетесь!

Тогда зачем robots.txt? и для кого он? И объясните еще что тогда это такое: "User-agent: *
Disallow: /administrator/"?

[WEB-Master]

Сообщение от kosta_kot

Тогда зачем robots.txt? и для кого он?

причем здесь роботс? файл роботс дает лишь рекомендации, а на самом деле роботы лазят там где хотят... и каким боком он вообще тут??

ЗЫ ну если вы сами припишите папку сапы в файле роботс, то все понятно (с вами, с таким же успехом можете сами написать платону письмо "я продаю ссылки, забаньте меня")

[kosta_kot]

Сообщение от WEB-Master

причем здесь роботс? файл роботс дает лишь рекомендации, а на самом деле роботы лазят там где хотят... и каким боком он вообще тут??

Вот и я согласен, что "на самом деле роботы лазят там где хотят" и могут считать все что есть. Соответственно ...

[WEB-Master]

Сообщение от kosta_kot

Вот и я согласен, что "на самом деле роботы лазят там где хотят" и могут считать все что есть. Соответственно ...

не все что есть, а все что могут найти... а найти папку сапы (и других бирж) они НИКАК не могут, если вы сами им ее не покажете (ссылкой, упоминанием в тексте, пропишите в роботс и т.д.).

ЗЫ почему роботы не могут найти папку читай выше

Добавлено через 6 минут
как то после массового обнуления гуглом ПР на страницах, также ходила догадка что он (и яндекс в том числе) могут добавлять к адресу страницы "?" и палить все ссылки... я взял и написал модуль к своим сайтам который мониторит все левые добавления & # ? и несуществующие GET запросы... знаете какой вывод? никто, ничего не подставляет и не высматривает ссылки (кроме пары раз за год вручную людьми). Все это параноя.

[kosta_kot]

Сообщение от WEB-Master

не все что есть, а все что могут найти... а найти папку сапы (и других бирж) они НИКАК не могут, если вы сами им ее не покажете (ссылкой, упоминанием в тексте, пропишите в роботс и т.д.).

ЗЫ почему роботы не могут найти папку читай выше

Приведу цитату от Яндекса "Директива User-agent.
Управлять доступом робота Яндекса к вашему сайту вы можете при помощи файла robots.txt, который должен быть размещен в корневой директории сайта. Робот Яндекса поддерживает стандарт описания http://www.robotstxt.org/wc/norobots.html с расширенными возможностями, описанными ниже.

В роботе Яндекса используется сессионный принцип работы, на каждую сессию формируется определенный пул страниц, которые планирует закачать робот. Сессия начинается с закачки robots.txt сайта, если его нет, он не текстовый или на запрос робота возвращается HTTP-код отличный от '200', считается, что доступ роботу не ограничен. В самом robots.txt проверяется наличие записей, начинающихся с 'User-agent:', в них ищутся подстроки 'Yandex', либо '*' (регистр значения не имеет), причем, если обнаружено 'User-agent: Yandex', директивы для 'User-agent: *' не учитываются. Если записи 'User-agent: Yandex' и 'User-agent: *' отсутствуют, считается, что доступ роботу не ограничен."

[WEB-Master]

kosta_kot, знаете какой самый легкий вариант для яндекса узнать какие сайты торгуют ссылками -> зарегистрироваться на сапе (и других биржах) и вытянуть всю базу путем подачи заявок на размещение ссылок. Вывод: волков бояться - в лес не ходить. Боитесь за свои сайты - не торгуйте ссылками. Мне больше достанется

Добавлено через 2 минуты

Сообщение от kosta_kot

Приведу цитату от Яндекса "Директива User-agent.

и что? никакой робот не может найти папку биржы (тема закрыта)... до вас похоже это все никак не доходит.