Show HN: Product analytics (and evals) for agent sessions on your MCP
4 hours ago
- Armature 捕获并展示 AI 代理的用户会话,揭示用户问题、代理推理过程及使用模式。
- 会话按用例分组,根据数量和成功率排序,包括未受支持的用例。
- 模型识别会话中的失败点、循环和死胡同,按根因分组并按用户影响排序,即使 API 返回 200 OK。
- 每个会话根据目标达成情况评分,支持完整回放用户提问、代理思考及所有调用,以精准定位问题。
- 集成快速:注册、生成 API 密钥、粘贴用于 SDK 连接的提示,数分钟内即可查看会话。
- 会话被视为敏感数据,默认存储前会脱敏处理 PII 和机密信息;支持定制化需求。