Helicone
开源 LLM 可观测性平台，一行代码即可监控、评估和实验。YC W23 孵化，支持 LangChain、LlamaIndex 等主流框架的追踪与成本分析。5.7K+ stars。
🎯适用场景：LLM 应用可观测性、成本追踪、A/B 实验评估
📥 收录于 2026/6/3
📊 仓库数据
📈 Stars 变化 ↑1 天 +9· 统计区间 7/17 20:11 → 7/18 23:22（1 天）
✅ 优点
- •YC 孵化项目成熟度高
- •一行代码集成
- •实验评估一体化
⚠️ 限制
- •依赖云端服务部署
- •高级功能需付费
🔗 相关工具
Langfuse
github.com/langfuse/langfuse
🪢 开源 LLM 工程平台，28K+ stars。提供 LLM 可观测性、指标监控、评估、提示词管理、playground 等功能，是 LLM 应用开发和调试的基础设施
🎯LLM 应用链路追踪、Prompt 调试与评估、生产环境可观测性
Hugging Face Agents Course
github.com/huggingface/agents-course
Hugging Face Agent 课程，29K+ stars。Hugging Face 官方出品的 AI Agent 学习课程，系统学习如何构建和使用基于 Hugging Face 生态的 AI Agent
🎯AI Agent 系统化学习、Hugging Face 官方 Agent 教程
RAG Techniques
github.com/nirdiamant/rag_techniques
RAG 技术大全，27K+ stars。展示各种高级检索增强生成（RAG）系统技术的教程合集，涵盖从基础 RAG 到高级优化策略的完整技术栈
🎯RAG 技术学习参考、检索增强方案选型与实现
Opik
github.com/comet-ml/opik
LLM 应用调试评估平台，19K+ stars。提供全面的 LLM 应用、RAG 系统和 Agent 工作流的调试、评估和监控能力
🎯LLM/RAG/Agent 应用调试评估、生产链路监控
Llama Cookbook
github.com/meta-llama/llama-cookbook
Llama 官方教程手册，18K+ stars。Llama 模型的官方入门指南，涵盖环境搭建、微调、部署和应用开发全流程
🎯Llama 模型应用示例学习、推理与微调实践参考
Ragas
github.com/vibrantlabsai/ragas
LLM 应用评估框架，提供 RAG 管道的自动化评测能力，支持答案相关性、上下文忠实度、幻觉检测等关键指标，帮助开发者量化和优化 LLM 应用质量。（14K+ stars）
🎯LLM 应用质量评估、RAG 管道评测、AI 产品验收测试
