Inferenza, distribuzione e runtime

llmgateway

theopenco/llmgateway

Route, manage, and analyze your LLM requests across multiple providers with a unified API interface.

★ 1,6KStelle
⑂ 172Fork
66Problemi aperti
TypeScriptLingua
NOASSERTIONLicenza
Q98Punteggio editoriale

Panoramica

Route, manage, and analyze your LLM requests across multiple providers with a unified API interface.

Requisiti, installazione e avvio rapido

I requisiti di installazione non sono indicati nei metadati del repository.

Utilizzo

L’utilizzo non è indicato nei metadati del repository.

Compatibilità del modello e casi d'uso

La compatibilità del modello non è indicata nei metadati del repository.

Note su licenza e rischi

NOASSERTION

ToolAI metadata-only listing: repository metadata is public; editorial content and manual verification are still pending.

vllm

vllm-project/vllm

★ 89,5KPython

sglang

sgl-project/sglang

★ 32,2KPython

OpenVINO

openvinotoolkit/openvino

★ 10,6KC++

GPUStack

gpustack/gpustack

★ 5,4KPython