什么是 llms.txt
llms.txt 是一种类似 robots.txt 的协议文件,部署在网站根目录(/llms.txt),为生成式 AI 与大语言模型(LLM)提供网站内容的结构化概览。它帮助 AI 爬虫快速理解网站的核心内容、主题分类与重要页面,是 GEO 优化的重要内容资产。
llms.txt 的作用
- 引导 AI 爬虫:告诉 AI 哪些页面是核心内容,优先抓取与理解
- 提供内容概览:用简洁的 Markdown 格式概述网站主题与结构
- 提升 AI 理解准确度:减少 AI 对网站内容的误解与幻觉
- 增强 AI 可见性:帮助品牌内容更易被 AI 引用
llms.txt vs robots.txt
robots.txt 控制搜索引擎爬虫的访问权限(允许/禁止抓取),而 llms.txt 主动引导 AI 爬虫理解内容结构(推荐抓取什么)。两者互补:robots.txt 管「能不能抓」,llms.txt 管「优先抓什么」。
如何编写 llms.txt
- 用 Markdown 格式编写,放在网站根目录 /llms.txt
- 标题:网站/品牌名称
- 概述:一段话描述网站核心业务与价值
- 内容目录:列出重要页面及简要说明
- 定期更新,反映内容变化
llms.txt 是 GEO 优化中成本低、见效快的技术手段,建议每个品牌网站都部署。结合 结构化数据使用效果更佳。