Show HN: Observability for Coding Agents and LLM Applications
9 hours ago
- Telemetry.dev 是一个面向AI和LLM应用的可观测性平台，能够将每一次模型调用、工具步骤和检索作为OpenTelemetry追踪进行捕获，并附带令牌、成本、延迟和错误信息。
- 基于OpenTelemetry构建，它支持任何框架和语言，无锁定；首次追踪可在五分钟内设置完成。
- 免费计划每月提供10,000个跨度，无需信用卡，保留7天，一个项目，两个席位。
- 实时监控可在故障发生时立即呈现，并附带错误类型、状态和完整追踪。
- 关键指标包括数量、成本、p95延迟和错误，并按模型、提供商和环境进行细分。
- 输入和输出捕获按环境进行，内置秘密编辑和自定义编辑模式。
- 追踪可按名称搜索，按状态、环境、框架或会话进行过滤，并可打开查看完整详情。
- 支持TypeScript和Python的SDK，以及与Vercel AI SDK、LangChain和任何OTLP/HTTP导出器的集成。
- 成本在服务器端根据实际令牌使用量按当前定价（涵盖4,700多个模型）计算，并可选每跨度覆盖。