当前位置:论坛首页 > Linux面板 > 求助

宝塔提供的百度提交插件,能不能做点优化性的功能啊!

发表在 Linux面板2019-7-18 17:31 [复制链接] 2 1159

如题:宝塔提供的百度提交插件,能不能做点优化性的功能啊!

QQ截图20190718172718.jpg

我的论坛数据每天都会大量更新数据,图片、视频、文字都很大量。如果百度提交插件每天都这样给我全站抓取爬取,生产大量的静态文件,我的磁盘扛不住的,最终的结果就是网站挂掉!!!!能不能做点优化啊,比如,设置哪个盘多少容量之后就自动删除,要么转移其他盘继续生产,要么曾经提交过的页面就不要再来爬取了,天天都这样,网站的数据每天都在增,这样没有多少磁盘能耗下去了。

在线坐等答复,这个问题必须解决啊,我总不能天天去扩容磁盘啊,这是成本!!!!
使用道具 举报 只看该作者 回复
发表于 2019-7-18 17:37:13 | 显示全部楼层
我马上就要满盘了,我又要手动去删除啊?好累啊,100%的磁盘,网站就会挂了,昨天挂了一次,今天又来?!
使用道具 举报 回复 支持 反对
发表于 2019-7-19 11:26:12 | 显示全部楼层
表示不用这个插件,一样日蜘蛛几万抓取...
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

点击联系技术分析

工作时间:09:00至18:30

快速回复 返回顶部 返回列表