它解决什么
litellm 是一个基于 Rust 核心和 Python SDK 的 AI 网关,支持调用 100+ LLM APIs,涵盖 OpenAI、Bedrock、Azure、Anthropic、VertexAI、vLLM 及 Nvidia NIM,具备成本跟踪、访问控制、负载均衡和日志功能。
Repository #671269505 · stable identity
litellm 是一个基于 Rust 核心和 Python SDK 的 AI 网关,支持调用 100+ LLM APIs,涵盖 OpenAI、Bedrock、Azure、Anthropic、VertexAI、vLLM 及 Nvidia NIM,具备成本跟踪、访问控制、负载均衡和日志功能。 The fastest, litest AI Gateway. Rust core with Python SDK. Call 100+ LLM APIs in OpenAI (or native) format with cost tracking, guardrails, load balancing, and logging [Bedrock, Azure, OpenAI, Anthropic, OpenAI, VertexAI, vLLM, Nvidia NIM]
Decision brief
litellm 是一个基于 Rust 核心和 Python SDK 的 AI 网关,支持调用 100+ LLM APIs,涵盖 OpenAI、Bedrock、Azure、Anthropic、VertexAI、vLLM 及 Nvidia NIM,具备成本跟踪、访问控制、负载均衡和日志功能。
需要AI 编程、API 与后端能力的开发者或团队。
2026-07-20 获得 1 个公开唯一加星用户,全站公开事件榜第 255 名。
中文名称、简介和分类属于辅助理解层;GitHub 原始仓库信息始终是权威来源。
Project taxonomy
Public event history
来自 GH Archive 归档的公开 WatchEvent,按用户—仓库唯一对计数;不扣除取消 Star。
30 day true history
— 表示当日缺少有效连续快照,或项目当日不在可比较候选中;不补零,不插值。
Related repositories