当前位置:论坛首页 > Linux面板 > 求助

【待反馈】蜘蛛过多导致网站无法打开

发表在 Linux面板2022-9-15 21:53 [复制链接] 1 4768

服务器其他网站和宝塔面板都没问题,就是目标网站打不开504了,慢日志都是同一个网站,后台日志都是搜狗404页面
使用道具 举报 只看该作者 回复
发表于 2022-9-15 22:01:24 | 显示全部楼层
您好,您那边可通过robots.txt限制爬虫,或者通过Nginx一些规则匹配并禁止访问
https://www.jianshu.com/p/a460dd830fe8
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

点击联系技术分析

工作时间:09:00至18:30

快速回复 返回顶部 返回列表