当前位置:论坛首页 > Linux面板 > 讨论

更改端口号的后台login被百度抓了

发表在 Linux面板2018-5-26 15:45 [复制链接] 8 101876

更改自定义端口号的后台login被百度抓了

有没有办法禁止抓取?

在login.html添加了
<meta name="robots" content="noindex,nofollow" />

然后登陆报500
抱歉,程序异常
您请求的页面因发生异常而中断!

宝塔Linux面板 5.x 请求帮助



robots.txt可以放到哪里???
使用道具 举报 只看该作者 回复
发表于 2018-5-26 17:33:10 | 显示全部楼层
没人么~~~
使用道具 举报 回复
发表于 2018-5-27 22:18:39 | 显示全部楼层
使用道具 举报 回复
发表于 2018-5-29 17:44:54 | 显示全部楼层
面板已经设置了禁止蜘蛛抓取,http://ip:8888/robots.txt
使用道具 举报 回复 支持 反对
发表于 2018-5-30 09:39:29 | 显示全部楼层
桥哥 发表于 2018-5-29 17:44
面板已经设置了禁止蜘蛛抓取,http://ip:8888/robots.txt

宝塔被抓.jpg
可的确已经被抓了呀。
我自定义了709端口,linux的,
这个robots怎么去改?
使用道具 举报 回复 支持 反对
发表于 2018-5-30 09:50:28 | 显示全部楼层
本帖最后由 1501899526xlgl 于 2018-5-30 09:51 编辑
桥哥 发表于 2018-5-29 17:44
面板已经设置了禁止蜘蛛抓取,http://ip:8888/robots.txt
宝塔robots.jpg


robots是正常的,但还是被抓,百度的问题?
请问这个问题有解吗?
使用道具 举报 回复 支持 反对
发表于 2018-6-1 09:59:52 | 显示全部楼层
桥哥 发表于 2018-5-29 17:44
面板已经设置了禁止蜘蛛抓取,http://ip:8888/robots.txt

桥哥呢@桥哥
使用道具 举报 回复 支持 反对
发表于 2018-6-2 11:29:25 | 显示全部楼层
您好,各大搜索引擎不遵守蜘蛛爬虫规则,我们也很绝望,目前已在面板应用层拒绝所有蜘蛛爬虫访问,请将面板升级到最新版,如果已经是最新版,请在面板首页点击修复面板。
使用道具 举报 回复 支持 反对
发表于 2018-6-11 13:22:40 | 显示全部楼层
良哥 发表于 2018-6-2 11:29
您好,各大搜索引擎不遵守蜘蛛爬虫规则,我们也很绝望,目前已在面板应用层拒绝所有蜘蛛爬虫访问,请将面板 ...

好吧,我试试
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

企业版年付运维跟进群

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急问题处理

论坛响应时间:10分钟

问题处理方式:1对1处理(优先)

工作时间:白班:9:00 - 18:00

工作时间:晚班:18:00 - 24:00

立即付费处理

工作时间:09:00至24:00

快速回复 返回顶部 返回列表