robots.txt、sitemap 与 llms.txt 这类声明文件,最容易在「测试环境改了、生产环境没跟上」之间出岔子。把配置按环境隔离成独立文件,发布时只把已验收的版本推到生产,能避免一次灰度里的限流规则被原样带到线上。
隔离不等于各写各的:多份配置应共享同一份字段名与口径模板,差异只在环境相关的 URL、频次与灰度标记上。每次同步用 diff 看一遍,比逐行肉眼核对可靠;发现生产缺失某条声明时,先查是不是被隔离规则挡在发布产物之外。
本文只谈配置文件的环境隔离与发布纪律,不对任何一次抓取量下合规判定。配置改动便宜,正因为便宜更需要把「哪个环境、哪个版本、谁放行」写进变更记录。