23.04.2014, 02:27
|
#1 |
|
Мастер
Регистрация: 21.08.2008
Адрес: Минск
Сообщений: 881
Вес репутации: 222
  |
Боты, пинг боты, гугл боты.
Ребята, хостер рекомендовал мне заблокировать ботов на VPS и привел мне целый список.
Насколько я понял, поисковых ботов там нет. Хотя среди названий проскакивает mail ru и т.п. Насколько я понимаю это так маскируются плохие боты? И вообще кто они такие и зачем? Чем отличается пинг бот от обычного бота? Вот список, который мне хостер дал: Вообще предлагаю заблокировать этих ботов msnbot-media msnbot bingbot BLEXBot MJ12bot BuddhaBot Ezooms AhrefsBot Baiduspider PaperLiBot Twitterbot QuerySeekerSpider meanpathbot Mail.RU_Bot SemrushBot SolomonoBot Butterfly UnwindFetchor rogerbot NING TweetmemeBot SeznamBot coccoc Yeti Moreover TurnitinBot METASpider Nekstbot SputnikBot Nigma.ru Добавлено через 1 минуту P/s. Кто такие поисковые боты и зачем они я знаю) а вот что еще боты существуют и что то делают, об этом не думал.
__________________
Последний раз редактировалось lbmoney; 23.04.2014 в 02:27. Причина: Добавлено сообщение |
|
|
|
23.04.2014, 13:36
|
#2 |
|
Специалист
Регистрация: 03.12.2008
Сообщений: 414
Вес репутации: 204
|
Убрать из списка Twitterbot, он хороший и полезный и нагрузки лишней не создаст.
Мой список ненужных (активных) ботов: 360Spider AhrefsBot ApacheBench Aport Baiduspider bingbot Birubot BLEXBot bsalsa Butterfly CamontSpider discobot DotBot Exabot Ezooms FairShare FlaxCrawler FyberSpider Gigabot gold HTTrack ia_archiver InternetSeer Jakarta Java JS-Kit km.ru kmSearchBot larbin libwww Lightspeedsystems Linguee LinkBot LinkExchanger lwp-trivial MJ12bot MLBot msnbot NerdByNature NING NjuiceBot Nutch pflab PHP/ PostRank ptd-crawler Purebot PycURL Python Ruby QuerySeekerSpider SearchBot SISTRIX SiteBot Sitemaps SolomonoBot Sogou Soup Slurp SputnikBot spbot suggybot Superfeedr SurveyBot SWeb ttCrawler TurnitinBot UnwindFetchor User-Agent uTorrent Voyager WBSearchBot Wget WordPress Yeti YottosBot Zeus ZmEu
__________________
|
|
|
|
|
24.04.2014, 18:06
|
#3 | |
|
Мастер
Регистрация: 21.08.2008
Адрес: Минск
Сообщений: 881
Вес репутации: 222
|
Цитата:
__________________
|
|
|
|
|
|
24.04.2014, 19:23
|
#4 | |
|
Печник
Регистрация: 11.10.2009
Адрес: Наш мир
Сообщений: 2,060
Вес репутации: 232
|
Цитата:
Думаю для вас это будет лучший вариант.
__________________
|
|
|
|
|
|
25.04.2014, 00:07
|
#5 |
|
Специалист
Регистрация: 22.12.2013
Адрес: Файна
Сообщений: 483
Вес репутации: 152
|
протестую Wget - качалка юникс систем а не бот - сам не шастает
__________________
|
|
|
|
|
25.04.2014, 10:27
|
#6 | |
|
Специалист
Регистрация: 03.12.2008
Сообщений: 414
Вес репутации: 204
|
Цитата:
__________________
|
|
|
|
|
|
25.04.2014, 14:54
|
#7 |
|
Специалист
Регистрация: 22.12.2013
Адрес: Файна
Сообщений: 483
Вес репутации: 152
|
ну тогда уж и телепорт нужно банить
 а вот если файло не скачается - уже хуже
__________________
|
|
|
|
 |
|
|
Похожие темы
|
||||
| Тема | Автор | Раздел | Ответов | Последнее сообщение |
| Боты подсадили сайт | Pav57 | Вопросы от новичков | 3 | 21.11.2013 11:39 |
| А Боты то фальшивые.... | shadx | Разработка и сопровождение сайтов | 5 | 13.12.2012 15:04 |
| Боты гугла всбесилися | ubuntu | Google, MSN, Yahoo | 10 | 28.07.2012 20:54 |
| Боты, юзер агенты | Русская мафия | Курилка | 4 | 06.06.2009 16:48 |
| Статус 304 и поисковые боты | 4X_Pro | Установка кода на различные движки | 0 | 10.12.2007 13:29 |
Часовой пояс GMT +3, время: 23:09.