结论:HTTPS 不是 AI 收录的门槛,但协议和域名不统一会拖后腿,这两件事别混为一谈。
① 抓取这关跟 HTTPS 没关系。本系统 robots.txt 默认放行豆包、DeepSeek、Kimi、元宝等 16+ 中国系 AI 爬虫和 GPTBot、ClaudeBot 等国际系,llms.txt、answers 问答页也都是纯文本自动生成,http 下照样能读到。所以「没上 HTTPS 所以豆包不来」这个因果关系基本不成立。
② 真正容易出事的是同一个站能用 http、https、带 www、不带 www 四个地址打开。AI 爬虫会把这些当成重复内容,权重被拆散,抓取优先级反而更乱。去后台「系统设置→基本设置」把站点地址固定成带 https:// 的主域名,其他地址 301 过去,这一步比单纯装证书关键得多。
③ 证书别过期,也别留混合内容——页面里混着 http 图片或脚本,加载不完整,正文抓不全,AI 拿到的是残页,收录质量自然差。
④ 想确认有没有效果就别猜,后台「系统设置→GEO 优化」里的 AI 爬虫访问监控表,能看到哪个爬虫来过、什么频率、抓了哪些页面。
正式会员
认证极客






