Nginx屏蔽垃圾蜘蛛的办法

闲聊 无标签
0 392
WIZ
WIZ 自成一派 2025-02-11 08:19:11
Lv:45级

网站被疯狂抓取,甚至服务器都快宕机了。下面,是Nginx屏蔽垃圾蜘蛛的方法。

都使用宝塔面板的吧,那就好办多了。打开 宝塔后台-网站-网站管理-配置文件 中搜索

#禁止访问的文件或目录

在它上面敲个回车,然后加入下面代码

if ($http_user_agent ~* "AhrefsBot|bingbot|Bytespider|Baiduspider|SemrushBot|YisouSpider|facebook|applebot|sogou|mj12bot"){
    return 403;
}

完成,超级简单。使用 | 隔开,可以禁止任何搜索引擎蜘蛛哦。

楼主签名:DNSWIZ 站长故事
回帖
回复列表

    请遵守各国法律法规 严禁违规内容

    • QQ群:1140251126
    • Email:m@max.ooo
    • 本站可以自由发布外链
    • 本站域名皆为闲置域名,均可出售
    Hot posts
    01 kupid.ai和herahaven.com应该选哪个? 552
    02 a.icu b.icu c.icu d.icu 同时掉 526
    03 aigc.cx又多了一个域名 518
    04 今天把所有的google广告去掉了 517
    05 秀秀新米(已出) 510
    06 迅雷 12 精简绿色版(12.1.6.2780) 497
    07 Windows 11 LTSC 优化版 - placeholder(2025.02.27) 473
    08 deepseek给我的域名的建议 450
    09 音频文件转换软件 XRecode 3(1.164) 429
    10 虚拟机软件 | VMware Workstation 精简版(17.6.3) 415
    推荐主机