在之前传统的SEO优化里,我们都知道robots.txt是网站的标配,因为它负责告诉Google爬虫哪些页面能看,哪些不能看。但在AI全面普及的今天,传统的搜索模式正在发生变化,用户的搜索习惯也逐渐向AI靠拢,比如搜索某个东西之前,会先问下ChatGPT或者是Gemini。随着这一边变化,那么我们需要一种新的方式与大语言模型对话,这就是 llms.txt 诞生的背景。为什么你的WordPress还需要一个 llms.txt?目的是想要让AI准确抓取你的网站内容。

AI 时代下的网站配置:为什么除了 robots.txt 还需要 llms.txt?
简而言之,robots.txt 是门卫,负责拦截和放行;而 llms.txt 是导游,负责主动递上网站的“名片和精华摘要”。
当 AI 爬虫访问你的网站时,如果页面里充斥着侧边栏、广告位、复杂的 HTML 标签,AI 的理解成本会很高,甚至会抓取到错误的信息。llms.txt 的作用,就是主动提供一份极其纯净、结构化的高质量文本,直接告诉 AI:“这是我们品牌的官方定义,这是我们核心产品的介绍,请按照这个逻辑来理解我们。”
准备工作:筛选让 AI 搜索引擎精准抓取的核心数据
在动手配置之前,先别急着把网站的所有内容都塞进去。llms.txt 的核心在于“喂给 AI 最高质量的上下文”。你需要提前准备好以下信息:
- 品牌与背景介绍:用最精炼的语言概括你的网站是做什么的,受众是谁。
- 核心业务或产品说明:提供没有营销废话的客观功能列表。
- 公开文档与联系方式:API 文档地址、帮助中心链接、官方支持渠道。
格式建议:强烈建议使用 Markdown 格式编写这份内容。Markdown 去除了冗余的 HTML 标签,是目前所有大语言模型解析效率最高、最友好的文本格式。
WordPress 生成 llms.txt 的两种优化方案:插件与代码
对于WordPress站长来说,生成根目录文件通常有两种做法,你可以根据自己的技术背景来选择。
方法一:插件化配置(适合零基础新手)
如果你不想动主题文件,最安全的方式是利用现有的文件管理或 SEO 插件。
- 利用 WP File Manager 等文件管理器:直接在 WordPress 插件后台安装一个文件管理器,进入网站根目录(与 wp-config.php 同级),新建一个名为 llms.txt 的文件,将你准备好的 Markdown 内容粘贴进去即可。
- 部分前沿 SEO/AI 插件:目前市面上一些主打 AIO(AI 搜索优化)的插件,已经开始在后台集成自定义生成 .txt 文件的功能。你只需要在插件面板的文本框里填入内容,插件会自动在前端映射出这个地址。
方法二:纯代码实现动态生成(性能优先推荐)
物理创建一个 .txt 文件虽然简单,但如果你希望内容能随时根据后台设置动态调用,或者不想在根目录堆积太多实体文件,利用 WordPress 的路由重写(Rewrite API)来动态生成是更优雅、更极客的做法。
- 验证与排错:如何确认文件被成功加载?
- 配置完成后,打开浏览器,在你的域名后面加上/llms.txt(例如 https://yourdomain.com/llms.txt)直接访问。
- 如果成功:你应该能直接在浏览器中看到纯文本的 Markdown 内容。
- 按 F12 检查:打开浏览器的开发者工具,切换到 网络标签页,刷新页面。检查该请求的 状态码是否为 200 OK,以及响应头中的Content-Type是否为text/plain。
WordPress 网站配置 llms.txt 的常见问题 (FAQ)
Q:llms.txt 的内容格式必须是 Markdown 吗?
A:并非强制,纯文本也可以,但强烈推荐使用 Markdown。大模型在预训练时接触了海量的 Markdown 文档,它们对 # (标题)、- (列表)、> (引用) 这种结构非常敏感。良好的 Markdown 排版能大幅提升 AI 提取信息的准确率。
Q:配置完成后,需要主动提交给 ChatGPT 或 Claude 吗?
A:目前 AI 搜索引擎(如 SearchGPT、Perplexity)的爬虫机制类似于早期的 Google,主要依靠被动抓取和外部链接发现。你不需要(目前也没有入口)主动提交这个文件。只要 AI 爬虫顺着链接来到你的网站,它们就会习惯性地探测根目录下的 llms.txt。
Q:通过代码动态生成会拖慢 WordPress 的加载速度吗?
A:不会。我们在代码中使用了 exit; 语句。当系统检测到对 llms.txt 的请求时,输出纯文本后会立刻停止执行后续繁重的 WordPress 页面渲染和数据库查询逻辑,资源消耗极小,对前台用户的访问速度没有任何影响。
结语
简而言之,在流量入口逐渐从传统的搜索引擎向AI对话框转移的今天。给WordPress网站增加一个简单的 llms.txt 文件,是一次成本低,且具有前瞻性的优化动作。它就像你在AI世界中树立起一块指示牌,向AI清晰准确的传递你想要表达的品牌价值。
SEM 广告营销
SEO 全站营销
SNS 社媒营销
GEO 智能营销
B2B 品牌建站
领聚商学院
企业荣誉
