- 放行 AI 爬虫robots 和防火墙别拦
- 内容在 HTML 里不依赖脚本渲染
- 提供 llms.txt给 AI 的网站简介
- 补结构化数据组织、产品、问答
- 问答式内容把常见问题直接回答
- 保持一致各处信息统一准确
GEO 和 SEO 是什么关系
GEO(Generative Engine Optimization,生成式引擎优化)不是要替代 SEO,而是在 SEO 的基础上多做一层
- SEO 的目标是在搜索结果里排得更靠前,让人点进来
- GEO 的目标是让 AI 在回答问题时,读懂并引用你网站上的内容
两者的基础是一样的:网站能被顺利抓取,内容清楚、准确、有价值。SEO 做得好的网站,GEO 也有好的起点
第一步:别把 AI 爬虫挡在外面
AI 搜索和问答工具有自己的爬虫,常见的有 GPTBot、OAI-SearchBot、ClaudeBot、PerplexityBot、Google-Extended 等。很多网站不知不觉把它们拦住了
- robots.txt:检查有没有对这些爬虫写
Disallow - Cloudflare 的「阻止 AI 爬虫」开关:一些网站开了这个选项,AI 爬虫全部被拦。而且我遇到过规则设置不当、连谷歌蜘蛛也一起被拦的情况
- 服务器防火墙和安全插件:可能把不认识的爬虫当成恶意请求封掉
想被 AI 引用,就要允许它们抓取。如果有些内容不希望被用于 AI 训练,可以只放行用于搜索和实时回答的爬虫,单独拦截用于训练的爬虫
第二步:重要内容要在 HTML 里
很多 AI 爬虫不执行 JavaScript,或者执行能力有限。如果你的产品信息、联系方式、服务说明是靠脚本加载的,AI 爬虫看到的可能是一个空页面
检查方法:查看网页源代码(不是开发者工具里的元素面板),能直接看到这些文字就没问题
第三步:提供 llms.txt
llms.txt 是放在网站根目录的一个纯文本文件,用简洁的格式告诉 AI:这个网站是做什么的、主要页面有哪些、关键信息是什么。它就像是专门写给 AI 看的网站简介
# 公司名称
> 一句话介绍:做什么产品或服务,面向哪些客户
## 产品与服务
- [产品 A](https://域名/product-a):简短说明
- [产品 B](https://域名/product-b):简短说明
## 联系方式
- 邮箱、电话、地址
我自己的网站就有一份 llms.txt,列出了所有服务、价格和联系方式。注意文件要以 UTF-8 编码返回,否则中文内容会是乱码
第四步:补全结构化数据
结构化数据(Schema)用机器能直接读懂的格式描述页面内容,搜索引擎和 AI 都会用到
- Organization / LocalBusiness:公司名称、网址、联系方式、地址
- Product:产品名称、描述、图片、规格、价格
- FAQPage:常见问题和答案
- Article:文章的标题、作者、发布时间
- BreadcrumbList:页面在网站里的层级位置
可以用谷歌的富媒体搜索结果测试工具检查结构化数据有没有错误
第五步:用问答的方式写内容
AI 回答问题时,更容易引用那些「直接回答了问题」的内容。可以这样调整
- 把客户常问的问题列出来,每个问题用一个小标题,下面直接给出答案
- 关键信息写清楚,不要只用形容词:起订量是多少、交期多久、有哪些认证、出口到哪些国家
- 用列表和表格整理参数、对比和步骤,比大段文字更容易被准确理解
- 每个页面集中讲清楚一个主题
第六步:让别处也提到你
AI 的回答不只参考你自己的网站,还会参考行业网站、新闻、论坛、问答平台上的内容。在相关的行业平台上有准确的公司信息、被行业文章提到、在问答平台上有专业的回答,都会增加被 AI 推荐的机会
怎么看效果
- 用几个主流的 AI 工具,问一问和你的产品、服务相关的问题,看回答里有没有提到你、引用的信息是否准确
- 在网站统计里关注来自 AI 工具的访问来源
- 定期检查服务器日志里 AI 爬虫的抓取情况,确认它们能正常访问
GEO 优化和速度、SEO 优化一起做效果最好。想知道你的网站现在对 AI 爬虫是否友好,可以发网址给我先检查一遍

