宝塔618特惠活动,企业版999元/年,宝塔SSL证书买1送1!限时抢购!查看活动
当前位置:论坛首页 > Linux面板 > 求助

各搜索引擎不抓去https链接

发表在 Linux面板2018-12-20 21:02 [复制链接] 12 3064

如题 整站做了https  sitemap也做了https    可各搜索引擎还是抓取http的链接

在后台网站-配置文件中
server
{
listen 80 default_server;
    listen 443 ssl default_server;
    server_name www.xxxx.com;

这也爬虫抓取的是http://www.xxxx.com      http://是自动补上去

如果我把server_name后面改成https://www.xxxx.com  则爬虫抓取http://https://www.osolid.com

我想问这http自动添加的在哪设置? 可否改成https
使用道具 举报 只看该作者 回复
发表于 2018-12-20 21:03:02 | 显示全部楼层
去掉listen 80 default_server;  也还是一样
使用道具 举报 回复 支持 反对
发表于 2018-12-20 21:26:22 | 显示全部楼层
要抓吧 我的都抓取了也没做任何配置 买个统计嘛 看看蜘蛛抓取次数
使用道具 举报 回复 支持 反对
发表于 2018-12-21 09:11:23 | 显示全部楼层
http://tool.chinaz.com/pagestatus/
到这里查显示301跳转到https就不必要管其他的了
使用道具 举报 回复 支持 反对
发表于 2018-12-21 09:24:52 | 显示全部楼层
qichenghong 发表于 2018-12-21 09:11
http://tool.chinaz.com/pagestatus/
到这里查显示301跳转到https就不必要管其他的了

我没设转跳,现在全站链接是https,看日志也是抓取http的,我就想知道配置里面http自动添加的地方在哪  我可以改成https
使用道具 举报 回复 支持 反对
发表于 2018-12-21 10:06:40 | 显示全部楼层
qichenghong 发表于 2018-12-21 09:11
http://tool.chinaz.com/pagestatus/
到这里查显示301跳转到https就不必要管其他的了

i4cu.cn.jpg
按你说的这算是符合301跳转到https的情况吗?谢谢。
使用道具 举报 回复 支持 反对
发表于 2018-12-21 10:14:59 | 显示全部楼层
这个和宝塔什么关系都没有,不要什么稀奇古怪的问题就来问,,,首先,设置301跳转,其次!!!这是最重要的,就是去百度资源平台申请https审核,只有这样才能最快的抓取https链接,不然你需要等1-2周的缓存生效时间
使用道具 举报 回复 支持 反对
发表于 2018-12-21 10:24:33 | 显示全部楼层
mingxue 发表于 2018-12-21 10:14
这个和宝塔什么关系都没有,不要什么稀奇古怪的问题就来问,,,首先,设置301跳转,其次!!!这是最重要 ...

哦哦,原来这样。那再多嘴问一下:网站的robots要改吗?
使用道具 举报 回复 支持 反对
发表于 2018-12-21 10:26:17 | 显示全部楼层
i4cu.cn 发表于 2018-12-21 10:24
哦哦,原来这样。那再多嘴问一下:网站的robots要改吗?

robots.txt里面一般都是用的网站的相对路径,所以不用改,如果你是用的http协议的话就改成https的就好了,还有就是sitemap里面都要改成https的
使用道具 举报 回复 支持 反对
发表于 2018-12-21 10:27:35 | 显示全部楼层
mingxue 发表于 2018-12-21 10:26
robots.txt里面一般都是用的网站的相对路径,所以不用改,如果你是用的http协议的话就改成https的就好了 ...

好的,谢谢哥
使用道具 举报 回复 支持 反对
发表于 2018-12-21 12:03:03 | 显示全部楼层
mingxue 发表于 2018-12-21 10:14
这个和宝塔什么关系都没有,不要什么稀奇古怪的问题就来问,,,首先,设置301跳转,其次!!!这是最重要 ...

早就认证了 都快一年了,而我的重点是上面写的  配置文件 server-name 加https最后的结果就是http://https://...我的问题是http哪来的?
使用道具 举报 回复 支持 反对
发表于 2018-12-21 16:03:06 | 显示全部楼层
Jove 发表于 2018-12-21 12:03
早就认证了 都快一年了,而我的重点是上面写的  配置文件 server-name 加https最后的结果就是http://http ...

大哥,server_name是你虚拟主机在nginx里的标识和域名,并不包含协议

淘宝优惠券 www.jianloua.com  发表于 2021-9-20 17:20
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

点击联系技术免费分析

工作时间:09:00至18:30

快速回复 返回顶部 返回列表