Show HN: LettuceDetect – Lightweight hallucination detector for RAG pipelines
a year ago
- #AI
- #Hallucination Detection
- #RAG
- LettuceDetect是一款通过比较答案与给定上下文来检测RAG系统幻觉的工具
- 解决了上下文窗口限制和计算效率低下等局限性
- 在RAGTruth数据集上表现优于其他基于编码器和提示的模型
- 部分指标甚至超过LLAMA-2-13B等微调大语言模型
- 以MIT协议开源,提供代码、模型和工具
- 具有词元级精度、优化推理、4K上下文窗口和易集成等特性
- 支持pip安装或仓库克隆,提供简洁API接口
- F1分数超越GPT-4等模型,展现卓越性能
- 内置Streamlit演示和Web API,便于部署测试
- 基于ModernBERT架构在RAGTruth数据集训练,擅长长文本处理