Gatus
面向开发者的自动化状态页工具,支持 HTTP/TCP/ICMP 等多种健康检查,内置告警和事件管理。轻量级设计,适合小团队监控 AI 服务和 API 的可用性。
🎯适用场景:AI API 端点健康检查、模型推理服务可用性监控、对外服务状态页
📥 收录于 2026/5/27
📊 仓库数据
✅ 优点
- •轻量级,单个二进制即可运行
- •配置简单(YAML)
- •内置状态页和告警
⚠️ 限制
- •功能相对单一,不适合复杂监控场景
- •无分布式部署支持
🔗 相关工具
Grafana
github.com/grafana/grafana
开源可观测性和数据可视化平台。支持可视化指标、日志、追踪等多源数据,兼容 Prometheus、Loki、Elasticsearch、InfluxDB 等后端。是 MLOps 团队监控模型和基础设施的首选仪表盘工具。
🎯MLOps 模型监控仪表盘、AI 服务指标可视化、训练任务实时追踪
Prometheus
github.com/prometheus/prometheus
开源监控系统和时序数据库,CNCF 毕业项目。采用多维数据模型和 PromQL 查询语言,是云原生和 AI 基础设施监控的事实标准,可与 Grafana 无缝集成。
🎯AI 服务 GPU 使用率监控、模型推理延迟追踪、Kubernetes 集群资源监控
Nightingale
github.com/ccfos/nightingale
开源监控告警平台,定位为「告警和监控领域的 Grafana」。支持多数据源接入、灵活的告警规则和通知策略,适合需要统一监控告警平台的 AI/MLOps 团队。
🎯AI 模型性能告警、训练任务异常通知、多集群统一监控
vLLM
github.com/vllm-project/vllm
高吞吐 LLM 推理引擎,77,418+ stars。采用 PagedAttention 显存优化技术,吞吐量比 HuggingFace Transformers 高 24 倍,是生产环境部署大模型推理的首选方案,支持 OpenAI 兼容 API
🎯生产环境模型推理服务
Netdata
github.com/netdata/netdata
AI 全栈可观测性平台,78,515+ stars。实时监控服务器性能、应用指标和网络流量,内置 AI 异常检测引擎,自动发现并预警系统问题。零配置、开箱即用,每秒采集数千指标,是最轻量的基础设施监控方案。
🎯服务器与基础设施实时监控、AI 异常检测预警
RTK
github.com/rtk-ai/rtk
CLI 代理层,减少 60-90% 的 LLM token 消耗。Rust 编写的单二进制文件,零依赖,支持 Claude Code、Codex、Cursor 等主流 AI 编码工具。通过本地代理缓存和智能去重,大幅降低日常开发中的 token 成本
🎯AI 辅助编程与代码生成