当前位置:论坛首页 > Linux面板 > 求助

【已回复】为什么我的301 抓取 百度蜘蛛后台 多了HTTPS?

发表在 Linux面板2021-9-10 18:09 [复制链接] 10 2106

提交网址:
https://m.xxx.com/1/
抓取网址:
https://https://m.xxxx.com/1/ (有跳转)



这个是不是因为我的301 开启了强制 https 的问题?
但是为什么我用浏览器就没这个问题?
使用道具 举报 只看该作者 回复
发表于 2021-9-10 18:10:18 | 显示全部楼层
还有 我挂了强制HTTPS的话
大概多久生效?
使用道具 举报 回复 支持 反对
发表于 2021-9-10 18:51:45 | 显示全部楼层
没人看看吗!
我感觉着绝对是个BUG

我www域名都是好的

M端 死活不行都带上https  ‘

我是用 HTTPS A站 跳转 HTTPS B站 到底为什么 同样的设置  就WWW就是可以的 M端就是不行
浏览器都是好的  但是百度站长后台抓的 都是错的

如果蜘蛛不能抓取  这不是坑站长吗!
使用道具 举报 回复 支持 反对
发表于 2021-9-10 18:55:13 | 显示全部楼层
我突然想起来
我以前有个 几万IP的站 为什么 www 成功301 M端失败了

宝塔真是个大坑  
使用道具 举报 回复 支持 反对
发表于 2021-9-10 19:03:14 | 显示全部楼层
宝塔用户_pjrlnj 发表于 2021-9-10 18:51
没人看看吗!
我感觉着绝对是个BUG

m端HTTPS访问不了?您那边有开启强制HTTPS嘛?
如果此问题是BUG,就不是你一个再反馈了。

如果百度那边收录不到m端,建议您咨询下百度那边。
使用道具 举报 回复 支持 反对
发表于 2021-9-10 19:17:53 | 显示全部楼层
谢花郎 发表于 2021-9-10 19:03
m端HTTPS访问不了?您那边有开启强制HTTPS嘛?
如果此问题是BUG,就不是你一个再反馈了。

浏览器都是正常的

用户也是正常301跳转

但是百度抓取后台 是错误的  
比如你的网址301 到 HTTPS的话
他会带上HTTPS   就像我上面截图的这样

我说的BUG 就是这个问题

但是很奇怪 同一个域名 www是好的 M确是失败的
我已经不止一个域名是这样了

所以要么是宝塔这么多了某些参数 要么是 百度那边多用了某些参数
使用道具 举报 回复 支持 反对
发表于 2021-9-10 19:33:38 | 显示全部楼层
宝塔用户_pjrlnj 发表于 2021-9-10 19:17
浏览器都是正常的

用户也是正常301跳转

面板这边没有增加过关于收录这块的代码参数
使用道具 举报 回复 支持 反对
发表于 2021-9-10 19:36:43 | 显示全部楼层
谢花郎 发表于 2021-9-10 19:33
面板这边没有增加过关于收录这块的代码参数

我本人也是搞开发的

我现在已经在逐步检查  如果不行 我会重新 自己 装个NGINX 不用面板试试

我严重怀疑是SSL 部分的问题
使用道具 举报 回复 支持 反对
发表于 2021-9-10 19:37:21 | 显示全部楼层
谢花郎 发表于 2021-9-10 19:33
面板这边没有增加过关于收录这块的代码参数

不是收录

是百度站长后台 蜘蛛抓取!
使用道具 举报 回复 支持 反对
发表于 2021-9-10 19:42:29 | 显示全部楼层
宝塔用户_pjrlnj 发表于 2021-9-10 19:37
不是收录

是百度站长后台 蜘蛛抓取!

建议还是找百度那边查看下,301跳转参数也都是nginx默认的。
使用道具 举报 回复 支持 反对
发表于 2021-9-11 09:49:34 | 显示全部楼层
谢花郎 发表于 2021-9-10 19:42
建议还是找百度那边查看下,301跳转参数也都是nginx默认的。

经过测试
目前排除了宝塔原因
因为我自装的NGINX 也是这个问题
我准备换个IP 再看看蜘蛛抓取情况
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

点击联系技术免费分析

工作时间:09:00至18:30

快速回复 返回顶部 返回列表