llms.txt是放在网站根目录的纯文本文件,用Markdown语法告诉AI搜索引擎你的网站核心内容和结构。写法很简单:第一行写网站标题,第二行写简介,然后用Markdown链接列出关键页面。这个标准由fast.ai联合创始人Jeremy Howard于2024年提出,目前在GitHub已获得900...
llms.txt是放在网站根目录的纯文本文件,用Markdown语法告诉AI搜索引擎你的网站核心内容和结构。写法很简单:第一行写网站标题,第二行写简介,然后用Markdown链接列出关键页面。这个标准由fast.ai联合创始人Jeremy Howard于2024年提出,目前在GitHub已获得900+星标,正在被越来越多网站采用。
llms.txt是什么
llms.txt是一种面向AI大语言模型的开源标准,由Jeremy Howard(fast.ai联合创始人)于2024年发起。它的作用类似robots.txt,但面向的是AI搜索引擎而非传统爬虫——告诉大语言模型你的网站有哪些值得索引的内容。
目前该标准在GitHub已获得900+星标,社区活跃度持续增长。
打个比方,传统sitemap.xml是给Google爬虫看的,llms.txt是给GPT、豆包、DeepSeek等AI模型看的。根据中国信通院《2026年生成式AI产业发展白皮书》,AI搜索月活已达8.2亿,占网民78%。让AI模型快速理解你的网站内容,变得越来越重要。
llms.txt完整示例
下面是一个标准的llms.txt文件内容,可以直接参考修改:
骏咖科技
骏咖科技专注于GEO(生成式引擎优化)技术服务,帮助企业内容在AI搜索中获得更多引用和曝光。
核心页面:
- 关于我们: 公司介绍、团队背景和联系方式 - GEO服务: 生成式引擎优化服务详情和技术方案 - 案例分析: 3个行业GEO优化实战案例 - 技术博客: GEO技术文章和行业趋势分析可选:
- 常见问题: 30个GEO常见问题解答 - 白皮书下载: 2026年GEO行业白皮书PDF每个部分怎么写
llms.txt遵循Markdown语法,结构分四个部分,每个部分都有讲究:
标题(第1行) :以#开头,写网站或公司名称。这是AI模型看到的第一个信息,建议用品牌全称。
简介(第2行) :以>开头,用一句话概括网站做什么。保持30-50字,突出核心业务和差异化。
核心链接列表:以##开头分组,每行一个链接,格式为- 标题: 描述。描述部分很重要,它帮助AI理解页面内容,不要只写"点击查看"。
可选部分:FAQ、白皮书等辅助内容单独分组,用##标记。
写的时候注意三点:链接必须用完整URL(不要相对路径);描述要具体说明页面内容;核心内容和辅助内容分开分组。
怎么配置llms.txt
操作步骤很简单,三步搞定:
用文本编辑器(记事本、VS Code等)创建一个名为llms.txt的纯文本文件
按上面的格式写好内容,保存为UTF-8编码
上传到网站根目录,确保通过https://你的域名/llms.txt可以直接访问
上传完成后,用浏览器打开这个URL验证是否正常显示。如果看到你写的Markdown内容,说明配置成功。
llms.txt和robots.txt的区别
很多人会把llms.txt和robots.txt搞混,简单来说:
表格
| 对比项 | robots.txt | llms.txt |
|---|---|---|
| 面向对象 | 传统搜索引擎爬虫 | AI大语言模型 |
| 主要作用 | 控制爬虫访问权限 | 告知AI网站内容结构 |
| 语法格式 | 自有指令格式 | Markdown |
| 提出时间 | 1994年 | 2024年 |
| 提出者 | Martijn Koster | Jeremy Howard |
两者不冲突,可以同时使用。robots.txt管"能不能爬",llms.txt管"爬到后怎么看"。
llms.txt对AI引用的影响
普林斯顿大学的研究(论文编号arXiv:2311.09735)表明,优化内容的结构化可见度平均能提升40%的AI引用率,而权威信源的结构化标记能提升115.1%的引用概率。llms.txt正是提升结构化可见度的有效手段之一。
根据艾瑞咨询《2026年中国搜索营销行业白皮书》,生成式搜索占整体搜索的比例已从2025年的19.2%增长到38.7%,接近翻倍。这意味着AI搜索引擎正在快速崛起,提前做好llms.txt是在为未来铺路。
FAQ
Q:llms.txt必须写吗?不写会怎样?
不写不会影响网站正常运行,但AI搜索引擎需要自己爬取和猜测你的网站内容结构。写了之后,AI能更准确地理解你的网站,提高被引用的概率。
Q:llms.txt支持中文吗?
支持。llms.txt使用UTF-8编码,中英文都可以写。建议标题和描述用中文,URL路径用英文,兼容性更好。
Q:llms.txt写完多久能看到效果?
取决于AI搜索引擎的爬取频率。通常1-2周后AI模型会更新对网站内容的理解。可以定期检查AI搜索中对自己品牌的引用准确度,判断是否生效。
作者:骏咖(吴亚骏)