claw-compactor

开源LLM 运行时2.2k

14 阶段融合的 LLM Token 压缩管线,支持可逆压缩、AST 感知代码分析和智能内容路由,零 LLM 推理成本,MIT 许可证

🎯适用场景:LLM 上下文压缩、Token 成本优化、Agent 对话压缩

#Ai-agent-tools#Ai-infrastructure#Ast-code-analysis#Claw-compactor

📥 收录于 2026/6/3

📊 仓库数据

Stars2,207
Forks210
语言Python
更新2026/6/1

优点

  • 零 LLM 推理成本
  • MIT 开源协议
  • 支持代码 AST 感知

⚠️ 限制

  • 压缩率受限于内容类型
  • 配置需要调优

🔗 相关工具

Ollama

开源173k↑+22

github.com/ollama/ollama

本地运行开源大语言模型的最简方案,支持 Llama、Qwen、DeepSeek 等主流模型,一键安装、自动下载模型、提供 OpenAI 兼容 API,是 AI 开发者本地部署的首选工具

🎯生产环境模型推理服务

#本地部署#开源模型#API
语言Go
🍴 Forks16,413
📅 上线2023/6/26
🔄 更新2026/6/3
📥 收录2026/4/13

gpt4free

开源66k↑+1

github.com/xtekky/gpt4free

多模型免费访问平台,66,037+ stars。提供多种大语言模型的免费访问接口,包括 GPT-4、Claude、Gemini 等主流模型的聚合调用方案

🎯本地模型运行与推理服务

#免费模型#API聚合#多模型#开源
语言Python
🍴 Forks13,582
📅 上线2023/3/29
🔄 更新2026/6/3
📥 收录2026/4/20

LocalAI

开源47k↑+7

github.com/mudler/LocalAI

开源本地 AI 引擎,45,607+ stars。完全兼容 OpenAI API 的本地 AI 推理引擎,支持 LLM、语音识别、图像生成等多种模型,数据完全本地处理保护隐私

🎯生产环境模型推理服务、多模态内容理解与生成

#本地部署#隐私保护#OpenAI 兼容#多模型
语言Go
🍴 Forks4,130
📅 上线2023/3/18
🔄 更新2026/6/3
📥 收录2026/4/20

New API

开源37k↑+10

github.com/QuantumNous/new-api

统一的 AI 模型网关,支持聚合和分发各类 LLM API。自动转换为 OpenAI/Claude/Gemini 兼容格式,是 LLM 路由与统一接入的集中式网关方案。36K+ stars。

🎯多 LLM 模型统一接入、API 路由聚合、LLM 服务分发网关

#ai-gateway#llm-routing#openai#claude+1
语言Go
🍴 Forks8,369
🔄 更新2026/6/3
📥 收录2026/6/3

Kronos

开源28k↑+22

github.com/shiyu-coder/Kronos

面向金融市场的 Foundation Model,将金融市场语言建模为序列预测问题。支持金融时间序列分析、市场趋势预测和量化交易策略生成。由 shiyu-coder 团队开发,GitHub 20K+ 星,周增 3200+ 星,是金融 AI 领域增长最快的项目之一。采用类 Transformer 架构处理结构化金融数据,可对接主流交易 API。

🎯金融时间序列预测、量化交易策略生成、市场趋势分析

#金融 AI#时间序列预测#量化交易#Foundation Model+1
语言Python
🍴 Forks4,884
📅 上线2025/10/8
🔄 更新2026/6/3
📥 收录2026/4/21

llamafile

开源25k↑+8

github.com/mozilla-ai/llamafile

用单个可执行文件分发和运行大型语言模型,支持跨平台本地推理的轻量级方案,无需复杂环境配置即可快速启动 AI 模型

🎯本地运行 LLM 的轻量级方案

#local-llm#inference#cross-platform#gguf
语言C++
🍴 Forks1,367
🔄 更新2026/6/3
📥 收录2026/5/31