技能：robots与llms优化

类型：专题技能 用途：当任务涉及 robots.txt、llms.txt、AI 抓取策略或索引控制时，先读这组资料。

使用方式

• 先定位最接近当前任务的子目录或代表文件。
• 把目录中的案例、流程、脚本说明或经验帖压缩成结论、清单和适用边界。
• 如果同一主题存在多份重复镜像，优先看时间更新更晚、结构更完整的版本。

推荐抽取

• robots 与 llms 控制边界
• 允许与禁止抓取的策略
• 站点信号与索引关系

主要来源

• /Users/project/1B/sites/seo-llm/raw/robots.txt与llms.txt优化.pdf
• /Users/project/1B/sites/seo-llm/wiki/sources/robots-llms优化.txt
• /Users/project/1B/千百万刀/SEO/seo方法论/2-Knowledge-SEO方法论/你需要了解的10个重要SEO元标签.md

本文档为站内渲染。原始文件本地路径：saas/source/seo-llm/skill-中文技能-专题技能-robots与llms优化-035dd4.md（仅本地保留，不入库不部署）