Netdata
AI 全栈可观测性平台，78,515+ stars。实时监控服务器性能、应用指标和网络流量，内置 AI 异常检测引擎，自动发现并预警系统问题。零配置、开箱即用，每秒采集数千指标，是最轻量的基础设施监控方案。
🎯适用场景：服务器监控、应用性能观测、AI 驱动的异常预警、基础设施运维
📊 仓库数据
📈 上次抓取以来 ↑+13 ⭐
✅ 优点
- •零配置，开箱即用
- •AI 异常检测
- •每秒数千指标采集
- •轻量级、低资源占用
⚠️ 限制
- •高级功能需付费云版
- •告警规则需自定义
- •大规模部署需调优
🔗 相关工具
OpenSRE
开源⭐ 3.5k↑+192github.com/Tracer-Cloud/opensre
Tracer-Cloud 开源的 AI SRE Agent 工具包。在 AI 时代，运维不再只是人工写脚本——AI SRE Agent 能够自主监控系统、诊断故障、执行修复。OpenSRE 提供了构建 AI SRE Agent 的完整工具链：监控集成、故障诊断引擎、自动修复策略、以及 Agent 工作流编排。3,176 stars，周增 1,385 星。适合正在建设 AI 运维体系的团队。
🎯 AI 驱动的运维自动化、故障自动诊断与修复、SRE 工作流智能化
vLLM
开源⭐ 78k↑+92github.com/vllm-project/vllm
高吞吐 LLM 推理引擎，77,418+ stars。采用 PagedAttention 显存优化技术，吞吐量比 HuggingFace Transformers 高 24 倍，是生产环境部署大模型推理的首选方案，支持 OpenAI 兼容 API
🎯 生产环境 LLM 推理服务、高并发 API 服务、模型部署优化
LiteLLM
开源⭐ 45k↑+115github.com/BerriAI/litellm
100+ LLM API 统一 SDK，43,985+ stars。统一的 LLM API 代理和 SDK，支持 OpenAI、Claude、Gemini 等 100+ 模型，提供负载均衡、重试、成本跟踪等企业级功能
🎯 多模型统一接入、LLM 网关、成本优化、高可用 AI 服务架构
langfuse
开源⭐ 27kgithub.com/langfuse/langfuse
🪢 Open source LLM engineering platform: LLM Observability, metrics, evals, prompt management, playground, datasets. Integrates with OpenTelemetry, Langchain, OpenAI SDK, LiteLLM, and more. 🍊YC W23
Llama Stack
开源⭐ 27kgithub.com/meta-llama/llama-stack
Meta 推出的 Llama 4 系列模型统一部署栈，支持推理、微调和多模型路由，4 月新增 6,400+ 星。提供标准化的 API 接口和工具链，覆盖从模型加载、推理服务、微调到评估的全流程，简化 Llama 系列模型的部署和运维，是 Llama 生态的官方基础设施
🎯 Llama 模型统一部署、微调流水线、多模型路由服务
mlflow
开源⭐ 26kgithub.com/mlflow/mlflow
The open source AI engineering platform for agents, LLMs, and ML models. MLflow enables teams of all sizes to debug, evaluate, monitor, and optimize production-quality AI applications while controllin