IIS 屏蔽垃圾蜘蛛

zblog2年前 (2024-06-04)zblog问题解答66

<rule name="Block spider">

<match url="(^robots.txt$)" ignoreCase="false" negate="true" />

<conditions>

<add input="{HTTP_USER_AGENT}" pattern="gptbot|facebookexternalhit|ClaudeBot|Apache-HttpClient|SemrushBot|Webdup|AcoonBot|AhrefsBot|Ezooms|EdisterBot|EC2LinkFinder|jikespider|Purebot|MJ12bot|WangIDSpider|WBSearchBot|Wotbox|xbfMozilla|Yottaa|YandexBot|Jorgee|SWEBot|spbot|TurnitinBot-Agent|curl|perl|Python|Wget|Xenu|ZmEu" ignoreCase="true" />

</conditions>

<action type="AbortRequest" />

</rule>

返回列表

上一篇：brotli命令行压缩和解压缩命令

下一篇：java中 DBCP、C3P0、 BonecP、 Druid

相关文章

php判断变量是否存在，isset() 函数

在 PHP 中，判断变量是否存在通常使用 isset() 函数。如果你想要检查一个变量是存在或为空 null ，使用 isset()，变量是否被设置。下...

【zblog各种查】$zbp->GetUploadByID 根据类名表名ID 各种查

查询表（映射类） $where = array(); $where[] ...

获取百度相关词百度下拉词接口 360搜索相关词

https://www.baidu.com/sugrec?pre=1&p=3&ie=utf-8&json=1&prod=pc&from=pc_web&w...

php require_once 包含文件不显示不执行不报错就是空白，原因是函数名字重复了。。。

php require_once 包含文件不显示不执行不报错就是空白，原因是函数名字重复了。。。每个插件以插件名字命名函数或者以插件名字开头的类的静态函数组织函数...

php扩展宝塔一览

php扩展宝塔一览

必须装是因为 PHP7. 2 存在绕过open_basedir()的问题，PHP7.4没有这个问题。其他2是提升效率的！！配置文件可以 disable_classes = "...

str_pad php 字符串左右补全填充到固定长度的函数

str_pad 是 PHP 中的一个字符串处理函数，用于将字符串填充到指定的长度。其基本语法如下：str_pad(string $input, int $pad_leng...