当前位置:论坛首页 > Windows面板 > 求助

【已回应】请问这个有带 robots.txt 限制百度抓取吗?

发表在 Windows面板2020-8-31 19:13 [复制链接] 2 6314

请问这个宝塔有带 robots.txt 限制百度抓取吗?我用这个系统做域名收录百度显示就限制抓取,可是我查看文件里里明明没有robots.txt 这个文件,请问有谁知道这个是什么原因?由于该网站的robots.txt文件存在限制指令(限制搜索引擎抓取),系统无法提供该页面的内容描述
使用道具 举报 只看该作者 回复
发表于 2020-9-1 01:30:01 | 显示全部楼层
您好,没有的,这个文件是需要你自己编写的。
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

点击联系技术免费分析

工作时间:09:00至18:30

快速回复 返回顶部 返回列表