Ragas
LLM 应用评估框架,提供 RAG 管道的自动化评测能力,支持答案相关性、上下文忠实度、幻觉检测等关键指标,帮助开发者量化和优化 LLM 应用质量。(14K+ stars)
🎯适用场景:LLM 应用质量评估、RAG 管道评测、AI 产品验收测试
📥 收录于 2026/5/24
📊 仓库数据
📈 Stars 变化 ↑12 小时 +7· 统计区间 7/10 12:08 → 7/11 00:11(12 小时)
✅ 优点
- •LLM 评估领域事实标准,指标全面
- •与 LangChain/Haystack 等框架无缝集成
- •开源免费,社区活跃
⚠️ 限制
- •部分高级指标需要 LLM-as-judge,消耗 API 费用
- •文档以英文为主
🔗 相关工具
Llm Universe
github.com/datawhalechina/llm-universe
本项目是一个面向小白开发者的大模型应用开发教程,在线阅读地址:https://datawhalechina.github.io/llm-universe/
🎯AI 技术学习与实践教程
Genkit
github.com/genkit-ai/genkit
Google 开源的 AI 应用开发框架,支持 JavaScript、Go 和 Python,提供插件系统、流式响应和可观测性,已在 Google 生产环境中使用。
🎯使用 Google 技术栈快速构建 AI 应用和 Agent
Helicone
github.com/Helicone/helicone
开源 LLM 可观测性平台,一行代码即可监控、评估和实验。YC W23 孵化,支持 LangChain、LlamaIndex 等主流框架的追踪与成本分析。5.7K+ stars。
🎯LLM 应用可观测性、成本追踪、A/B 实验评估
LangChain
github.com/langchain-ai/langchain
最流行的 LLM 应用开发框架,137K+ stars。提供链式编排、RAG 检索增强生成、Agent 构建等核心能力,覆盖 Python 和 JavaScript 双语言生态,是构建 LLM 应用的基础设施
🎯LLM 应用快速开发
immich
github.com/immich-app/immich
高性能自托管照片视频管理,5.5K+ stars。高性能自托管照片和视频管理方案,支持 AI 人脸识别、场景分类和智能搜索
🎯LLM 应用快速开发
Prompt Engineering Guide
github.com/dair-ai/prompt-engineering-guide
Prompt Engineering 资源指南,73,558+ stars。系统化讲解 Prompt 设计原则、技巧和最佳实践,包含 Few-shot、Chain-of-Thought、ReAct 等高级提示技术的详细教程
🎯AI 技术学习与实践教程、提示词工程与优化
