Logfire

开源推理 & 评测4.3k

Pydantic 团队打造的 AI 可观测性平台。面向生产环境 LLM 和 Agent 系统的监控与追踪,支持 FastAPI 原生集成、日志与指标采集。4.2K+ stars。

🎯适用场景:生产环境 LLM/Agent 监控、Pydantic 生态集成可观测性

#ai-observability#pydantic#fastapi#llm-observability

📥 收录于 2026/6/3

📊 仓库数据

Stars4,280
Forks244
语言Python
更新2026/6/3

优点

  • Pydantic 团队出品质量高
  • FastAPI 原生集成
  • 观测能力全面

⚠️ 限制

  • 与 Pydantic 生态绑定较深
  • 独立使用学习成本

🔗 相关工具

phoenix

开源10.0k

github.com/arize-ai/phoenix

AI 可观测性与评估平台,9750 stars。提供 LLM 应用的可观测性、评估和调试能力,帮助监控 AI 系统性能

🎯LLM/RAG 链路追踪、Embedding 质量评估、生产监控

#agents#ai-monitoring#ai-observability#aiengineering+1
语言Python
🍴 Forks906
🔄 更新2026/6/3
📥 收录2026/5/7

Helicone

开源5.8k↑+2

github.com/Helicone/helicone

开源 LLM 可观测性平台,一行代码即可监控、评估和实验。YC W23 孵化,支持 LangChain、LlamaIndex 等主流框架的追踪与成本分析。5.7K+ stars。

🎯LLM 应用可观测性、成本追踪、A/B 实验评估

#ai-observability#llm-evaluation#analytics#langchain
语言TypeScript
🍴 Forks593
🔄 更新2026/6/3
📥 收录2026/6/3

Laminar

开源3.0k

github.com/lmnr-ai/lmnr

YC S24 孵化的 AI Agent 可观测性平台——专为 AI Agent 设计的开源观测和分析工具,支持 LLM 评估、Agent 追踪和自托管部署,是 Agent 可观测性领域的新星。

🎯AI Agent 可观测性、LLM 评估追踪和自托管部署

#ai-observability#evaluation#agent-tracing#YC
语言TypeScript
🔄 更新2026/6/3
📥 收录2026/6/4

OpenLIT

开源2.5k↑+2

github.com/openlit/openlit

开源 AI 工程平台,OpenTelemetry 原生 LLM 可观测性。支持 GPU 监控、Guardrails、评估、提示管理,集成 50+ LLM 供应商。2.4K+ stars。

🎯AI 工程全栈可观测、GPU 监控、LLM 供应商统一监控

#ai-observability#opentelemetry#gpu-monitoring#llmops
语言TypeScript
🍴 Forks288
🔄 更新2026/6/3
📥 收录2026/6/3

vLLM

开源82k↑+25

github.com/vllm-project/vllm

高吞吐 LLM 推理引擎,77,418+ stars。采用 PagedAttention 显存优化技术,吞吐量比 HuggingFace Transformers 高 24 倍,是生产环境部署大模型推理的首选方案,支持 OpenAI 兼容 API

🎯生产环境模型推理服务

#推理引擎#高性能#PagedAttention#生产部署
语言Python
🍴 Forks17,609
📅 上线2023/2/9
🔄 更新2026/6/3
📥 收录2026/4/13

Netdata

开源79k↑+1

github.com/netdata/netdata

AI 全栈可观测性平台,78,515+ stars。实时监控服务器性能、应用指标和网络流量,内置 AI 异常检测引擎,自动发现并预警系统问题。零配置、开箱即用,每秒采集数千指标,是最轻量的基础设施监控方案。

🎯服务器与基础设施实时监控、AI 异常检测预警

#可观测性#监控#AI 异常检测#基础设施
语言C
🍴 Forks6,452
📅 上线2016/8/1
🔄 更新2026/6/3
📥 收录2026/4/21