BLEXbot - что за очередная напасть?

[Anatoly]

Всем доброго. Заметил с неделю пасущегося бота на своём сайтике, представляющегося как "Mozilla/5.0 (compatible; BLEXBot/1.0; +http://webmeup-crawler.com/)". Кто что знает? По ссылке какое-то непонятное бла-бла-бла и рассказы о том, что "бот никак не напрягает ваш сайт", хотя он уже задолбал реально, т.к. сканирует всё по пятьсотому кругу уже. Забанить, али пущай живёт?

[MonAmur]

забанить однозначно

[Anatoly]

Сообщение от MonAmur

забанить однозначно

А чего он делает-то? Вдруг SEO-говносервис какой; и если в нём не быть то ГО начнут бесноваться...

[MonAmur]

Сообщение от Anatoly

А чего он делает-то?

так Вы ж читали - http://webmeup-crawler.com/

[Anatoly]

Сообщение от MonAmur

так Вы ж читали - http://webmeup-crawler.com/

Да там ботва какая-то. Интересует, знает ли кто-нить вообще про этот "сервис". А то забанишь, а потом начнётся... Судя по здесь, к примеру, на всём форуме ни разу этот бот не упоминался.

[vipraskrutka]

баньте. я всех баню, кто зашел больше 100 раз и не несет мне финансовой пользы.

[Daedalus]

Сообщение от Anatoly

Всем доброго. Заметил с неделю пасущегося бота на своём сайтике, представляющегося как "Mozilla/5.0 (compatible; BLEXBot/1.0; +http://webmeup-crawler.com/)". Кто что знает? По ссылке какое-то непонятное бла-бла-бла и рассказы о том, что "бот никак не напрягает ваш сайт", хотя он уже задолбал реально, т.к. сканирует всё по пятьсотому кругу уже. Забанить, али пущай живёт?

BLEXbot - это веб-искатель с белой шляпой, целью которого является поиск и индексирование обратных ссылок.

BLEXbot была разработана командой WebMeUp для создания самой полной и обновленной базы данных обратной связи. Это позволяет интернет-маркетологам и оптимизаторам создавать и контролировать свои внешние и внутренние профили ссылок, а также отслеживать и избавляться от вредных или нежелательных обратных ссылок.

База данных, собранная BLEXBot, используется для управления инструментом WebMeUp SEO и инструментом Backlink WebMeUp. Последний в настоящее время открыт для общественности на бесплатной основе. Все желающие могут использовать этот богатый ресурс и загружать обратные ссылки для любого количества сайтов (до 1 миллиона результатов на сайт!).

Как и боты, разработанные Google, Bing и другими поисковыми системами, BLEXbot - полностью законный веб-искатель. Он строго подчиняется инструкциям robots.txt и всегда идентифицирует себя по имени и домену. Вот пользовательский агент:

Mozilla / 5.0 (совместимый; BLEXBot / 1.0; + http: //webmeup-crawler.com/)

В отличие от поисковых роботов, BLEXBot не индексирует контент с веб-страниц, кроме ссылок. Инструмент собирает данные постепенно, делая трехсекундные паузы, прежде чем открывать другую ссылку. Таким образом, веб-сайты, которые он посещает, могут нормально функционировать во время обхода.

Если вам нужна дополнительная информация о BLEXBot или если вы хотите создать для нее некоторые правила в файле robots.txt, посетите его официальный сайт.

[zeta]

Сообщение от Anatoly

Забанить

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} (blexbot) [NC]
RewriteRule .* - [R=403,L]