hosting:blocked-user-agents

Различия

Показаны различия между двумя версиями страницы.

Ссылка на это сравнение

Предыдущая версия справа и слева Предыдущая версия
Следующая версия
Предыдущая версия
hosting:blocked-user-agents [2019/10/03 09:43]
karlov
hosting:blocked-user-agents [2020/07/06 15:35] (текущий)
karlov
Строка 1: Строка 1:
-====== 2.36. Блокируемые User-Agent ======+====== 2.34. Блокируемые User-Agent ======
  
-Список User-Agent, которым ограничен доступ к хостингу (в ответ на запросы они получают [[hosting:errors:403|ответ 403]]): +===== Без возможности разблокировки =====
-  - ''JDatabaseDriverMysqli'' +
-  - ''80legs.com'' +
-  - ''DLE_Spider.exe'' +
-  - ''xpymep.exe'' +
-  - ''libwww-perl'' +
-  - ''BOT for JCE'' +
-  - ''coccoc'' +
-  - ''heritrix'' +
-  - ''Aibot'' +
-  - ''exabot.com'' +
-  - ''butterfly'' +
-  - ''CareerBot'' +
-  - ''FTRF'' +
-  - ''%%www.exb.de%%'' +
-  - ''magpie-crawler'' +
-  - ''SISTRIX'' +
-  - ''radian6'' +
-  - ''BLEXBot'' +
-  - ''JikeSpider'' +
-  - ''Sosospider'' +
-  - ''Attentio'' +
-  - ''filterdb.iss.net'' +
-  - ''cmscrawler'' +
-  - ''tkl.iis.u-tokyo.ac.jp'' +
-  - ''J-BRO'' +
-  - ''ApacheBench'' +
-  - ''meanpathbot'' +
-  - ''MJ12Bot'' +
-  - ''Indo////XploitTools''+
  
-Также можно самостоятельно [[hosting:htaccess:user-agent-restrictграничивать доступ]] любым другим User-Agent с помощью директив в ''[[hosting:htaccess|.htaccess]]''.+Список User-Agent, которым ограничен доступ к хостингу (в ответ на запросы они получают [[hosting:errors:403твет 403]]и которых нельзя разблокировать: 
 +  - JDatabaseDriverMysqli 
 +  - 80legs.com 
 +  - DLE_Spider.exe 
 +  - xpymep.exe 
 +  - libwww-perl 
 +  - BOT for JCE 
 +  - coccoc 
 +  - heritrix 
 +  - Aibot 
 +  - exabot.com 
 +  - butterfly 
 +  - CareerBot 
 +  - FTRF 
 +  - %%www.exb.de%% 
 +  - magpie-crawler 
 +  - SISTRIX 
 +  - radian6 
 +  - BLEXBot 
 +  - JikeSpider 
 +  - Sosospider 
 +  - Attentio 
 +  - filterdb.iss.net 
 +  - cmscrawler 
 +  - tkl.iis.u-tokyo.ac.jp 
 +  - J-BRO 
 +  - ApacheBench 
 +  - meanpathbot 
 +  - MJ12Bot 
 +  - Indo////XploitTools
  
-===== Другие статьи =====+===== С возможностью разблокировки =====
  
-{{indexmenu>.#1|nsort tsort}}+Некоторые User-Agent, используемые ботами, блокируются по причине создания бессмысленной нагрузки, но их блокировку можно отключить. Такая возможность доступна для ботов: 
 +  - SemrushBot 
 +  - MegaIndex 
 +  - Dotbot 
 +  - LTX71 
 +  - Nmap 
 +  - velen.io 
 +  - Re-re Studio 
 +  - netEstate NE Crawler 
 +  - statdom.ru 
 +  - SEOkicks 
 +  - 7Siters 
 +  - Seekport Crawler 
 +  - serpstatbot 
 +  - panscient.com 
 +  - ZoominfoBot 
 +  - SearchAtlas 
 +  - DuckDuckBot 
 +  - AwarioRssBot 
 +  - AwarioSmartBot 
 +  - NetpeakSpiderBot 
 +  - GetIntent 
 +  - ia_archiver 
 +  - AspiegelBot 
 +  - WPScan 
 +  - %%https://gdnplus.com%% 
 +  - DuckDuckGo 
 +  - ApacheBench 
 +  - python-requests 
 +  - BorneoBot 
 +  - Ahrefs 
 + 
 +==== Разблокировка ==== 
 + 
 +Чтобы отключить блокировку, в [[hosting:my-sites:site-settings|настройках сайта]] напротив «**Не блокировать ботов**» выберите ботов, которых не нужно блокировать, и сохраните изменения:{{ :hosting:disable-bot-blocking.png?nolink |}} 
 + 
 +===== Самостоятельная блокировка ===== 
 + 
 +Любым другим User-Agent можно самостоятельно [[hosting:htaccess:user-agent-restrict|ограничивать доступ]] с помощью директив в [[hosting:htaccess|.htaccess]].
  • hosting/blocked-user-agents.1570085038.txt.gz
  • Последнее изменение: 2019/10/03 09:43
  • karlov