后台「系统设置→GEO 优化」页面里有张“AI 爬虫访问监控”表,哪个爬虫来过、来得多频繁、最近抓了哪些页面,一眼就能看到,不用去翻服务器日志。

这张表是系统按爬虫 UA 自动记录的,前提是 GEO 各开关保持开启(默认就是全开)。开启后 robots.txt 会自动放行豆包 DoubaoBot、DeepSeek、元宝、Kimi、百度、通义等十六七个国内 AI 爬虫,以及 GPTBot、ClaudeBot 这类国际系;后台还能按需关掉某个爬虫或追加自定义 UA。

两点要提醒:一是表里暂时空白不代表没收录,AI 平台抓不抓、什么时候抓由它们自己决定,通常 1~4 周才会首次到访,耐心等就行;二是监控只能看到爬虫在站点上的访问痕迹,收录结果得去对应 AI 里搜自己的内容验证。

想让爬虫早点来,可以在后台填上百度站长平台的推送 Token,IndexNow 默认是开的,新帖发布后会自动推送;另外把「每日 GEO 健康体检」这个计划任务挂着,能定期帮你排查收录环境有没有出问题。