AI 问答里品牌不可见,常见原因是技术层失败,而不是「没做 AIGEO 就会被永久删除」。优先自查:robots 误拦、正文只存在于脚本、nosnippet/noindex、以及跨平台名称不一致。这些都能在禁用脚本的浏览器和公开校验工具里复现。

本文不讨论报价,也不承诺「做完就会出现」。四层概念见AIGEO 四层与 SEO 是否冲突。robots 细则见robots.txt 与 AI 爬虫配置

先排除四类技术失败

四类失败会让模型根本读不到可用片段。排除之前,不要用「被 AI 遗忘」解释现象。

  • robots.txt Disallow 了整站或关键目录,GPTBot 等遵守协议的爬虫不会抓正文。
  • nosnippet / noindex / 登录墙 让摘要或索引不可用。
  • 正文仅前端渲染:禁用脚本后服务说明消失。
  • 实体冲突:官网、地图、社媒名称或链接互相矛盾,模型无法对齐「这是同一家」。
「我们排查『AI 里搜不到』时,一半以上先在 robots 和空壳页上结束,还没轮到写内容策略。」

— 徐勇,云享耕科技,官网抓取故障排查

怎样当场复现

打开目标 URL,禁用 JavaScript,看服务、地址、FAQ 是否仍在。再读 /robots.txt 是否误拦。JSON-LD 用公开校验工具看报错。这三步不需要服务商后台。

OpenAI 对 GPTBot 的说明要求站点用 robots.txt 表达是否允许抓取;允许不等于会被引用。RFC 9309 描述的是 robots 协议本身,不是某家问答产品的排序。

Q:技术层全绿,为什么还是不被提到?

A:技术层只排除「读不到」。选不选你当来源,还取决于问法、竞争内容和段落是否可单独成答。不能从「不可见」反推「被永久拉黑」。

Q:哪些情况不必先做这些自查?

A:品牌从未上线过可公开 URL,或整站需要登录才能看——应先提供可抓取的公开页,而不是先写 llms.txt。

Q:改完多久会「被记住」?

A:没有公开时限。抓取与索引节奏随产品而异,不能写成交付天数。

nosnippet 与实体冲突的五分钟清单见robots.txt / nosnippet 自查与修复。本文只回答「不可见的常见技术原因」。

本文首发于云享耕科技

参考文献

OpenAI. GPTBot documentation

IETF. RFC 9309 Robots Exclusion Protocol

Google Search Central. Robots meta tag, data-nosnippet, and X-Robots-Tag