Jevotron: Multiple Jev integrations from the command line
8 hours ago
- jevotron 是一款命令行工具，用于一次性异常检测，提供字段级异常评分和重点审查队列。
- 它包含一个缓存，通过重复使用对未更改输入的评估，使后续运行更便宜。
- 用户从 TypeSafe 仪表板设置 API 密钥后，开始扫描带有指导的文件，例如“检查机场位置”。
- 工作流程有三个步骤：预览（检查数据和模型请求）、扫描（评估条目和字段分数）和审查（排序警告，导出 CSV 或 JSONL）。
- jevotron 开箱即支持多种格式，包括 CSV、YAML、JSON、TOML、文本、OBO 和 gzip 文件，并提供 --field 和 --guidance 等选项。
- 结果保存在 SQLite 中，允许恢复失败运行或重新排序而无需重新评估。
- 报告包括字段概率、条目分数、源位置和评估日期，基于最高字段异常概率设置警告阈值。
- 使用示例包括在机场 CSV 数据中查找注入错误、对 YAML 清单应用规则、评分 OBO 测量单位以及分类代理轨迹。
- 在对代理轨迹的试点测试中，jevotron 匹配了 79.8% 的步骤质量标签，对有害步骤的精确率为 89.7%，召回率为 70.3%。