Ragas

LLM 应用评估框架,提供 RAG 管道的自动化评测能力,支持答案相关性、上下文忠实度、幻觉检测等关键指标,帮助开发者量化和优化 LLM 应用质量。(14K+ stars)

🎯适用场景:LLM 应用质量评估、RAG 管道评测、AI 产品验收测试

#llm-evaluation#rag#LLMOps#指标#测试

📥 收录于 2026/5/24

📊 仓库数据

Stars14,778
Forks1,552
语言Python
协议Apache-2.0
更新2026/7/10

📈 Stars 变化 12 小时 +7· 统计区间 7/10 12:08 → 7/11 00:11(12 小时)

优点

  • LLM 评估领域事实标准,指标全面
  • 与 LangChain/Haystack 等框架无缝集成
  • 开源免费,社区活跃

⚠️ 限制

  • 部分高级指标需要 LLM-as-judge,消耗 API 费用
  • 文档以英文为主

🔗 相关工具

Llm Universe

开源13k+2

github.com/datawhalechina/llm-universe

本项目是一个面向小白开发者的大模型应用开发教程,在线阅读地址:https://datawhalechina.github.io/llm-universe/

🎯AI 技术学习与实践教程

#langchain#rag
语言Jupyter Notebook
🍴 Forks1,373
🔄 更新2026/7/10
📥 收录2026/5/7

Genkit

开源6.2k+2

github.com/genkit-ai/genkit

Google 开源的 AI 应用开发框架,支持 JavaScript、Go 和 Python,提供插件系统、流式响应和可观测性,已在 Google 生产环境中使用。

🎯使用 Google 技术栈快速构建 AI 应用和 Agent

#ai-framework#genkit#llm#agents+2
语言TypeScript
🍴 Forks786
🔄 更新2026/7/10
📥 收录2026/6/10

Helicone

开源5.9k+3

github.com/Helicone/helicone

开源 LLM 可观测性平台,一行代码即可监控、评估和实验。YC W23 孵化,支持 LangChain、LlamaIndex 等主流框架的追踪与成本分析。5.7K+ stars。

🎯LLM 应用可观测性、成本追踪、A/B 实验评估

#ai-observability#llm-evaluation#数据分析#langchain
语言TypeScript
🍴 Forks625
🔄 更新2026/7/10
📥 收录2026/6/3

LangChain

开源141k+56

github.com/langchain-ai/langchain

最流行的 LLM 应用开发框架,137K+ stars。提供链式编排、RAG 检索增强生成、Agent 构建等核心能力,覆盖 Python 和 JavaScript 双语言生态,是构建 LLM 应用的基础设施

🎯LLM 应用快速开发

#RAG#智能体#链式编排#生态最大
语言Python
🍴 Forks23,505
📅 上线2022/10/17
🔄 更新2026/7/10
📥 收录2026/4/11

immich

开源107k+77

github.com/immich-app/immich

高性能自托管照片视频管理,5.5K+ stars。高性能自托管照片和视频管理方案,支持 AI 人脸识别、场景分类和智能搜索

🎯LLM 应用快速开发

#backup-tool#flutter#google-photos#google-photos-alternative+1
语言TypeScript
🍴 Forks6,157
📅 上线2022/2/3
🔄 更新2026/7/11
📥 收录2026/5/20

Prompt Engineering Guide

开源76k+10

github.com/dair-ai/prompt-engineering-guide

Prompt Engineering 资源指南,73,558+ stars。系统化讲解 Prompt 设计原则、技巧和最佳实践,包含 Few-shot、Chain-of-Thought、ReAct 等高级提示技术的详细教程

🎯AI 技术学习与实践教程、提示词工程与优化

#Prompt工程#教程#最佳实践#AI教育
语言MDX
🍴 Forks8,358
📅 上线2022/12/17
🔄 更新2026/7/10
📥 收录2026/4/20