Which Design Doc Did a Human Write?
2 days ago
- 作者为同一个开源Web应用创建了三份设计文档：一份手写（16小时完成），一份由Claude Opus 4.6生成（中等投入），一份由GPT-5.4生成（高投入），然后请读者识别出人类写的那份。
- 读者通过个人观点、经验之谈、不常见的技术选择（如NixCI、PolyForm-Noncommercial许可证）以及非通用的架构标题，正确识别出了人类写的文档。
- AI生成的文档通过“臃肿”被识破——啰嗦浮夸的句子、过度使用粗体、不切实际的时间估算（如“10小时”的里程碑），以及缺乏应用特定威胁的通用安全/隐私章节。
- 图片是明显的破绽：AI生成的图表存在布局问题，元素相互重叠，因此作者从所有版本中去掉了图表。
- 两个AI版本都忽略了真正的难题——比如在照片分享应用中平衡安全性与可用性——而是专注于通用最佳实践，而非项目的具体挑战。
- 作者总结道，人类编写的设计文档传达了艰难的设计权衡和利益冲突，而AI倾向于生成通用且臃肿的内容。