DEV Community · Show DEV8/6 16:1247 分
AI生成目录内容模板残留检测经验
What I learned about detecting template residue in AI-generated directory content
本文作者分享了在检测AI生成目录内容中模板残留的经验。当AI生成的目录条目超过200条时,人工阅读检查已不可行。作者开发了脚本lint-humanization.mjs,用于捕捉两种视觉检查难以发现的问题:命名短语污染(Claude反复使用的固定短语)和结构句子重复(去除数字、仓库名和标点后语义相同的句子)。在1664条AI模型条目、120条独立游戏条目和80条SaaS条目中,这两种问题均存在。作者指出,标准质量检查(如陈词滥调检测、字数限制、标签池验证)无法发现模型在不同条目中重复使用相同句式的问题,即使模型未触发回退模板,也会因系统提示收敛和回退相邻措辞而产生相似内容。