We removed 80% of our agent's tools
5 months ago
- #File System
- #AI Agents
- #Text-to-SQL
- 团队开发了一个复杂的内部文本转SQL代理d0，其初始版本性能脆弱且缓慢，成功率仅为80%。
- 他们通过将其简化为单一工具（执行任意bash命令），使代理成功率提升至100%，步骤更少且响应更快。
- d0旨在将自然语言问题转化为SQL查询，实现全公司范围内的数据民主化访问。
- 初始方案依赖大量提示工程和多个专用工具，需要持续维护和重新校准。
- 新方案被称为'文件系统代理'，允许Claude直接访问文件，使用grep/cat/ls等Unix工具来理解和查询数据。
- 新架构速度提升3.5倍，token消耗减少37%，相比旧系统实现100%成功率。
- 关键经验包括：顺应趋势（利用文件系统等现有强大抽象）、信任模型推理能力、确保良好文档和数据结构。
- 团队强调应从最简单架构起步，仅在必要时增加复杂度，并为未来模型改进预留空间。