OmniRoute has joined Cheaper InferenceExplore Cheaper Inference

אל תפסיק לקודד.

Route across 352 providers through one OpenAI-compatible endpoint, with automatic fallback.

OpenAI-compatible Free and open source61.1k stars (opens in a new tab)

OmniRoute × Cheaper Inference

Combine OmniRoute’s automatic fallback and developer tools with Cheaper Inference’s cost-ranked marketplace. Every eligible request starts with the cheapest available provider route.

63 modelsDirect list price compared with the Cheaper Inference price
Direct list prices compared with Cheaper Inference prices by model
ModelInput priceOutput priceSavingsContextDetails
grok-imaginexAI · image$0.01$0.0014/ image$0.05$0.014/ image72% off
gpt-5.6-lunaOpenAI · text$0.20$0.08/ 1M tokens$1.20$0.48/ 1M tokens60% off1.1M
gpt-5.6-terraOpenAI · text$2.00$0.80/ 1M tokens$12.00$4.80/ 1M tokens60% off1.1M
gpt-oss-120bOpenAI · text$0.10$0.04/ 1M tokens$0.50$0.20/ 1M tokens60% off
gpt-5.6-solOpenAI · text$2.00$1.00/ 1M tokens$10.00$5.00/ 1M tokens50% off1.1M
glm-5Z.ai · text$1.00$0.534597/ 1M tokens$3.20$1.71071/ 1M tokens46.54% off198K
glm-4.5Z.ai · text$0.60$0.33/ 1M tokens$2.20$1.21/ 1M tokens45% off128K
glm-4.5-airZ.ai · text$0.20$0.11/ 1M tokens$1.10$0.605/ 1M tokens45% off128K
Showing 8 of 63 models

ההבטחה

נקודת קצה אחת. אל תפסיק לבנות.

Core control

אל תגיע למגבלות

מעבר אוטומטי בין 339 ספקים במיליות שנייה. נגמרה המכסה? הספק הבא לוקח פיקוד. אפס השבתה.

Core control

חסוך עד 95% טוקנים

A 12-engine pipeline reduces eligible context by 15–95%. The documented tool-heavy example reduced it by ~89%.

Core control

$0 להתחלה

90+ free tiers and 56 recurring or keyless free-forever providers. No credit card needed for the keyless quick start.

Core control

35 supported integrations

16+ סוכני קידוד. Claude Code, Codex, Cursor, Cline, Copilot, Antigravity. דרך הגדרה אחת.

Core control

נקודת קצה אחת

תרגום OpenAI ↔ Claude ↔ Gemini ↔ Responses API. כוון כל כלי ל-/v1 ופשוט עובד.

Core control

ברמת ייצור

מפסקי מעגל, סוואת TLS, MCP (105 כלים), A2A, זיכרון, מגבלות, הערכות. מגובה ב-25,000+ בדיקות.

הקטלוג

All behind one endpoint.

A catalog spanning chat, media, search, local runtimes, cloud agents and system integrations.

352 providers

Every one of them, behind a single local endpoint.

The one endpoint every client points athttp://localhost:20128/v1

14 Search12 Audio-only2 Upstream proxy3 Cloud agent1 System
OpenAIAnthropicGoogleDeepSeekxAIZ.aiMoonshotMiniMaxAlibabaMetaBytedanceAion Labs
25OAuthClaude Code, Codex, Cursor, GitHub Copilot, Kimi Code…
233API keyOpenAI, Anthropic, Groq, NVIDIA, Cerebras, Mistral…
35Web cookieChatGPT Web, Claude Web, Gemini Web, Grok Web…
14LocalOllama, LM Studio, vLLM, llama.cpp…
13No authenticationOpenCode Free, Felo, Pollinations and other keyless routes…
Explore the provider reference (opens in a new tab)

פועל תוך 60 שניות

שלוש פקודות. אפס הגדרות.

Install the package, launch the gateway, then point any OpenAI-compatible client at port 20128.

Provider catalog
352
Routing strategies
19
Local endpoint
:20128/v1

Step 1: Install

Install the omniroute npm package globally.

omniroute: install
$ npm install -g omnirouteadded 1 package

Step 2: Run

Launch the API and dashboard together on port 20128.

omniroute: run
$ omniroute▸ dashboard ✓ http://localhost:20128/dashboard▸ api ...... ✓ serving on :20128

Step 3: Connect your tool

Use http://localhost:20128/v1; the keyless auto route works on a fresh install.

omniroute: connect
$ curl localhost:20128/v1/models✓ models listed

הכול כלול

הכול מובנה. ללא תוספות.

ניתוב, עמידות, ניקוז מכסה חינמית, דחיסה ופרוטוקולי סוכן. קובץ בינארי אחד, אפס תוספים לחבר.

Gateway control

קומבינציות חכמות

Set a model to auto or build your own combo with 19 strategies and tiered fallback.

Use a ready-made mode or combine 19 strategies around the goal that matters.

Gateway control

זיכרון

זיכרון שיחה מתמיד. FTS5 חיפוש מילות מפתח + Qdrant שחזור וקטורי, מובנה.

Gateway control

3-layer resilience

כשל ברמה הנכונה. לא בכל המערכת. מפסק-מעגל לכל ספק, קירור לכל חיבור, נעילה לכל מודל. מפתחות ומודלים אחרים ממשיכים לשרת.

Gateway control

מכסה חינמית

Pool-deduped accounting across 90+ free tiers.

~1.51B טוקנים חינמיים בחודש.

Gateway control

דחיסה

12 composable engines for tool output, context and response style.

Reduce eligible tokens by 15–95%.

Gateway control

שרת MCP

A built-in server exposing 110 gateway tools across 33 scopes.

110 tools · 33 scopes · stdio / HTTP

Gateway control

פרוטוקול A2A

A JSON-RPC agent server with 6 skills.

6 skills · JSON-RPC 2.0 · Agent Card

Gateway control

Semantic cache

A repeated request can return from cache, and the response header reports what that saved.

X-OmniRoute-Cache: HIT

Client compatibility

Keep your existing coding tools.

Point an OpenAI-compatible CLI or editor at one local base URL; OmniRoute handles the providers behind it.

Claude Code
Codex CLI
Cursor
Cline
GitHub Copilot
Gemini CLI
OpenCode
Kilo Code
Factory Droid
Continue
Roo Code
Antigravity
Aider
OpenClaw
Goose
Grok Build
Windsurf
Devin CLI

http://localhost:20128/v1

request.sh
curl http://localhost:20128/v1/chat/completions \
  -H "Authorization: Bearer $OMNIROUTE_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{"model":"auto","messages":[{"role":"user","content":"Hello"}]}'

חדש

עכשיו ב-VS Code Copilot Chat שלך

התקינו את התוסף OmniCopilot וכל מודל של OmniRoute יופיע ישירות בבורר הדגמים שאתם כבר משתמשים בו. בלי סרגל צד חדש, בלי ממשק צ'אט חדש.

Official Marketplace

Works in VS Code stable and Insiders. Install from the Marketplace or Extensions view.

Open VSX Registry

עבור פיצולי VS Code שלא משתמשים בחנות הרשמית. Cursor, Windsurf, VSCodium, Theia, code-server, Gitpod ועוד.

לא נדרשת מנוי Copilot

החל מ-VS Code 1.122, מודלים של ספקים עובדים בלי התחברות ל-GitHub או מנוי Copilot. מצב סוכן, קריאה לכלים וראייה, על המודלים החינמיים של OmniRoute.

המציאות היומיומית

למה OmniRoute

לכל כאב של AI לקידוד יש פתרון מובנה. ללא סקריפטים, ללא פיקוח.

Without routing
With OmniRoute
Quota expires unused
Track and drain the allowance you already have
Rate limits stop you mid-task
4-tier auto-fallback in milliseconds
Tool output burns tokens
12-engine compression, 15–95% on eligible content
Expensive APIs add up
Cost-optimized routing can pick the cheapest eligible target
Each tool needs its own setup
One endpoint and one dashboard
A provider is unavailable from your network
Proxy scopes and client-fingerprint controls
One dead key breaks a provider
Breaker, cooldown and lockout isolate the failure
A team shares one subscription
Key pools and fair-share quotas
You need local control of routing data
Local-first storage with encrypted credentials
No spend or health visibility
Usage, quota, savings and latency analytics

השוואה כנה

איך אנחנו משתווים

Capabilities checked against the linked project documentation on 2026-08-30.

CapabilityOmniRoute (opens in a new tab)9Router (opens in a new tab)LiteLLM (opens in a new tab)CLIProxyAPI (opens in a new tab)
Providers35240+100+8+ upstreams
Routing strategies193-tierretry / priorityround-robin / fill-first
Tiered fallback with UIYesYesManual policyMulti-account
Token compression12 engines · 15–95%RTK / Headroom / CavemanNo built-in pipelineHTTP compression

Public README and official documentation snapshot; verify linked sources before purchase or deployment decisions.

Routing

Choose an auto route.

Use a ready-made mode or combine 19 strategies around the goal that matters.

Model · fallback enabledautoBalanced default
OpenAI-compatible request
curl http://localhost:20128/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{"model":"auto","messages":[{"role":"user","content":"Write a TypeScript retry helper."}]}'

Routing alias auto selected. Objective: Balanced default. Fallback enabled.

Drain subscription quota

Use quota you already have before touching paid APIs.

priority · fill-first

Spread load

Balance traffic across keys and accounts to reduce rate-limit pressure.

weighted · round-robin · p2c · least-used · headroom

Cheapest first

Route to the lowest-cost eligible target.

cost-optimized

Context-aware

Keep long contexts on models that fit, then relay when needed.

context-relay · context-optimized · cache-optimized

Randomized

Distribute eligible traffic across targets.

random · strict-random

Adaptive scoring

Use 15-factor scoring, last-known-good and reset-aware windows.

reset-window · reset-aware · lkgp · auto · fusion · pipeline

טוקנים חינמיים, ספורים בכנות

~1.51B טוקנים חינמיים בחודש.

455 catalog entries are deduplicated into 40 recurring pools; only published positive budgets feed the headline.

1.51B

Pool-deduped accounting keeps shared quotas from being counted more than once. No-cap providers stay visible without inflating the token total. Checked 2026-08-30.

View the calculation (opens in a new tab)
Recurring or keyless free-forever providers56
  • Mistral1B/month
  • LLM7150M/month
  • Nara150M/month
  • Gemini CLI · forever60M/month
  • Kiro50 credits/month
  • Qoder · foreverFree catalog
  • LongCat · forever50M/day
  • Cerebras1M/day
  • NVIDIA NIM~40 RPM
  • Pollinations · foreverNo key
  • Cloudflare Workers AI · foreverDaily neurons
  • OpenCode Free · foreverNo-auth catalog

הפסק לשרוף טוקנים

Reduce eligible tokens by 15–95%.

פלט כלים, הקשר חוזר ו-JSON נפוח נדחסים לפני שמגיעים למודל. אותה משמעות, חלק מהטוקנים. 12 מנועים בני-הרכבה מוערמים בצינור שאתה שולט בו.

Context reduced from 15–95% on eligible tokens

Before: The function should iterate over the list of items, and for each item, it should check whether the value is greater than zero, and if so, add it to the running total. After: sum all list items where value > 0

  1. Session-Dedup
  2. CCR
  3. Lite
  4. RTK
  5. Responses Tool Output
  6. Headroom
  7. Relevance
  8. Caveman
  9. Aggressive
  10. LLMLingua-2
  11. Ultra
  12. OmniGlyph

Same instruction. Less context to pay for.

Before69 tokens
The function should iterate over the list of items, and for each item, it should check whether the value is greater than zero, and if so, add it to the running total.
After19 tokens
sum all list items where value > 0

Composable pipeline

  1. Session-Dedup
    Drop content already sent earlier in the session.
  2. CCR
    Archive large blocks and restore them on demand.
  3. Lite
    Apply conservative lossless cleanup.
  4. RTK
    Filter and deduplicate command and tool output.
  5. Responses Tool Output
    Compact Responses API tool payloads.
  6. Headroom
    Apply reversible tabular and structured-data compaction.
  7. Relevance
    Keep sentences most relevant to the latest query.
  8. Caveman
    Use rule-based prose condensation.
  9. Aggressive
    Apply stronger configured pruning.
  10. LLMLingua-2
    Use code-safe semantic pruning in an isolated worker.
  11. Ultra
    Combine high-savings stages with preservation guards.
  12. OmniGlyph
    Encode eligible repeated structures compactly.

Profiles

Published profile range~30%x-omniroute-compression: standard

Standard compression selected. Published range ~30%.

Controls and output styles

  • Named profiles and active selector
  • Visual Compression Studio
  • Anthropic Context Editing
  • Adaptive context-budget dial
  • Per-request `x-omniroute-compression` header
  • Offline eval harness
  • Token-threshold auto-trigger
  • Terse prose
  • Less code (YAGNI)
  • Terse CJK 文言

Control precedence: request header → combo → profile → adaptive policy → default.

3 שכבות, לא 3 דרגות

כשל ברמה הנכונה. לא בכל המערכת.

מפתח גרוע לא צריך להרוג ספק. מודל מת לא צריך להרוג מפתח. כל כשל מבודד לתחום הקטן ביותר האפשרי, כך שכל השאר ממשיך לשרת.

model ⊂ connection ⊂ provider
Provider circuit breakerWhen a provider is unhealthy, combo routing skips it until a half-open probe succeeds.
Connection cooldownCool down one key or account while sibling connections keep serving.
Model lockoutLock one rate-limited or unavailable model while other models on the connection remain available.

Network controls

Network routing and local data controls.

Proxy scopes control network routing while local-first storage keeps operational data on your machine.

Three proxy scopes

Route globally, per provider or per individual connection.

  • Global · per-provider · per-connection
  • SOCKS5 and HTTP(S) proxies
  • Proxy marketplace integration

TLS and client fingerprint controls

Match supported provider clients down to selected transport characteristics.

  • JA3/JA4-capable transport via wreq-js
  • Provider-specific client profiles
  • IPv4 and IPv6 egress controls

Private and local-first

Keys, usage and history stay on the host you control.

  • SQLite on disk with AES-256-GCM encrypted credentials
  • No OmniRoute account required
  • Self-host on infrastructure you choose
RussiaChinaIranCubaTürkiye

ראה הכול במבט אחד

לוח בקרה מלא, לא קובץ הגדרות.

Manage providers, combos, analytics, health and costs at localhost:20128/dashboard.

localhost:20128/dashboardExample data
352providers connected
90+free tiers available
198healthy in this example
  • Claude Code · OAuth · live
  • Cerebras · free · live
  • Groq · cooldown example
  • NVIDIA NIM · free · live

מותאם לסוכנים

חבר סוכן. הוא מפעיל את OmniRoute בעצמו.

OmniRoute הוא לא רק פרוקסי. הוא מדבר בפרוטוקולי הסוכן. חבר אותו ללקוח MCP, לרשת A2A או לסוכן קידוד בענן, והוא הופך לכלי שהסוכן יכול להפעיל.

שרת MCP

110 tools across 33 scopes over stdio and HTTP transports.

110 tools · 33 scopes · stdio / HTTP

claude mcp add omniroute --type http --url http://localhost:20128/api/mcp/stream

שרת A2A

6 skills for smart routing, quota, discovery, cost analysis and health reporting over JSON-RPC 2.0.

6 skills · JSON-RPC 2.0 · Agent Card

סוכני ענן

הפעל את Codex, Cursor, Devin ו-Jules דרך ממשק אחד. צור משימות, אשר תוכניות וזרום תוצאות, הכול מנותב דרך OmniRoute.

Codex · Cursor · Devin · Jules

מעבר לניתוב

לא רק פרוקסי. פלטפורמה.

שירותים מוטמעים

הרץ את Bifrost (Go relay), 9Router או CLIProxy כ-sidecars מנוהלים. או פרופיל אשכול מלא. ישירות מלוח הבקרה.

הידע שלך, בהקשר

Notion ו-Obsidian מחוברים ככלי MCP. ההערות והכספות שלך הופכות להקשר מהשורה הראשונה לכל מודל.

מגבלות מובנות

שמירה מפני הזרקת פרומפט בכל נתיב, מחיקת PII בבחירה ונרמול מסנן תוכן בטיחות. הגנה ללא נעילת ספק.

גיימיפיקציה

רצפים, הישגים וחיסכון חי. השימוש שלך, מוחשי.

From the community

How OmniRoute is used and discussed.

See what developers are building, asking and sharing across X, Reddit and YouTube.

32 videos from 32 channelsSee all 32 community videos

one local endpoint for cursor / cline / claude code / copilot 😳 OmniRoute (24.7k★ on GitHub) runs a self-hosted router on your machine so you only need one base URL for all your coding agents. wha…

25 posts from X · 25 Reddit postsSee every post

בנוי בפתיחות

קהילה פעילה ומתפתחת

OmniRoute משתחרר ללא הפסקה. בזכות מאות תורמים שמחזיקים אותו בחוד החנית.

OmniRoute by Cheaper Inference

Choose how you run OmniRoute.

Self-host OmniRoute, or start with Cheaper Inference for a hosted cost-ranked gateway.