宝塔双11特惠活动,企业版2299元/3年,SSL证书低至9.9元!查看活动
当前位置:论坛首页 > Linux面板 > 求助

【已回应】大神求助!!百度蜘蛛抓取异常,说是服务器...

发表在 Linux面板2020-2-20 09:07 [复制链接] 1 2443

本帖最后由 谢花郎 于 2020-2-20 10:06 编辑

请问这个抓取异常是怎么回事呢,服务器也没开防火墙,而且Robots.txt也提示找不到。

网站开了ssl证书。
截屏2020-02-2009.08.20.png


截屏2020-02-2009.08.26.png

截屏2020-02-2009.08.30.png

截屏2020-02-2009.08.34.png




这是宝塔安装的插件,所有的都在这里。
截屏2020-02-2009.08.52.png
这是运行情况(晚上的时候经常性的出现打不开页面,然后过一分钟左右 就好了,有时候还会提示连接数据库错误。)
截屏2020-02-2009.08.45.png
截屏2020-02-2009.08.20.png
截屏2020-02-2009.08.26.png
截屏2020-02-2009.08.30.png
截屏2020-02-2009.08.34.png
使用道具 举报 只看该作者 回复
发表于 2020-2-20 10:06:14 | 显示全部楼层
抓取异常会有错误提示码的,您可根据该提示码通过站点日志排查,找不到Robots.txt,可以尝试暂时关闭强制https后再试试,我自己的就是这样子的。
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

点击联系技术免费分析

工作时间:09:00至18:30

快速回复 返回顶部 返回列表