HyperDX

开源推理 & 评测9.5k

开源可观测性平台,统一整合日志、指标、追踪、会话回放和错误追踪。基于 OpenTelemetry 标准,适合需要全栈可观测性的 AI 应用团队,一站式排查线上问题。

🎯适用场景:AI 应用全栈可观测性、用户会话回放辅助调试、日志与追踪关联分析

#observability#logs#traces#session-replay#opentelemetry

📥 收录于 2026/5/27

📊 仓库数据

Stars9,548

优点

  • 统一平台整合多种可观测性数据
  • 会话回放功能独特
  • 基于 OpenTelemetry 标准,集成简单

⚠️ 限制

  • 相对较新,生态不如 Grafana Stack 成熟
  • 大规模数据需要自建存储

🔗 相关工具

Grafana

开源74k

github.com/grafana/grafana

开源可观测性和数据可视化平台。支持可视化指标、日志、追踪等多源数据,兼容 Prometheus、Loki、Elasticsearch、InfluxDB 等后端。是 MLOps 团队监控模型和基础设施的首选仪表盘工具。

🎯MLOps 模型监控仪表盘、AI 服务指标可视化、训练任务实时追踪

#observability#monitoring#dashboard#metrics+1
📥 收录2026/5/27

Nightingale

开源13k

github.com/ccfos/nightingale

开源监控告警平台,定位为「告警和监控领域的 Grafana」。支持多数据源接入、灵活的告警规则和通知策略,适合需要统一监控告警平台的 AI/MLOps 团队。

🎯AI 模型性能告警、训练任务异常通知、多集群统一监控

#monitoring#alerting#observability#metrics
📥 收录2026/5/27

TensorZero

开源11k↑+2

github.com/tensorzero/tensorzero

开源 LLMOps 平台,统一 LLM 网关、可观测性、评估和微调能力,提供从实验到生产的端到端基础设施,帮助企业高效管理多模型 LLM 应用。(11K+ stars)

🎯LLM 生产环境管理、多模型路由、A/B 测试和效果评估

#llmops#llm-gateway#observability#evaluation+1
语言Rust
🍴 Forks831
🔄 更新2026/5/26
📥 收录2026/5/24

vLLM

开源81k↑+22

github.com/vllm-project/vllm

高吞吐 LLM 推理引擎,77,418+ stars。采用 PagedAttention 显存优化技术,吞吐量比 HuggingFace Transformers 高 24 倍,是生产环境部署大模型推理的首选方案,支持 OpenAI 兼容 API

🎯生产环境模型推理服务

#推理引擎#高性能#PagedAttention#生产部署
语言Python
🍴 Forks17,275
📅 上线2023/2/9
🔄 更新2026/5/26
📥 收录2026/4/13

Netdata

开源79k↑+2

github.com/netdata/netdata

AI 全栈可观测性平台,78,515+ stars。实时监控服务器性能、应用指标和网络流量,内置 AI 异常检测引擎,自动发现并预警系统问题。零配置、开箱即用,每秒采集数千指标,是最轻量的基础设施监控方案。

🎯服务器与基础设施实时监控、AI 异常检测预警

#可观测性#监控#AI 异常检测#基础设施
语言C
🍴 Forks6,444
📅 上线2016/8/1
🔄 更新2026/5/26
📥 收录2026/4/21

Prometheus

开源64k

github.com/prometheus/prometheus

开源监控系统和时序数据库,CNCF 毕业项目。采用多维数据模型和 PromQL 查询语言,是云原生和 AI 基础设施监控的事实标准,可与 Grafana 无缝集成。

🎯AI 服务 GPU 使用率监控、模型推理延迟追踪、Kubernetes 集群资源监控

#monitoring#alerting#metrics#time-series+1
📥 收录2026/5/27