Services

OpenAI-kompatibles Proxy-Gateway für 100+ LLM-Anbieter

KIAPI
Deployen

Was ist LiteLLM?

LiteLLM stellt eine einheitliche OpenAI-kompatible API bereit, die Anfragen an Azure, Anthropic, Bedrock und Dutzende weitere Anbieter leitet. Teams wechseln Modelle, setzen Budgets und zentralisieren LLM-Zugriff.

Deployment auf Kubeara

  1. Melden Sie sich in Ihrem Kubeara-Dashboard an und verbinden Sie einen Server, falls noch nicht geschehen.

  2. Öffnen Sie den Service-Katalog und wählen Sie LiteLLM.

    LiteLLM auf Kubeara
    LiteLLM auf Kubeara
  3. Prüfen Sie die vorkonfigurierten Einstellungen und klicken Sie auf Deployen.

    LiteLLM auf Kubeara bereitgestellt
    LiteLLM auf Kubeara bereitgestellt
  4. LiteLLM läuft jetzt auf Ihrem Kubeara-Server. Öffnen Sie die Service-URL in Ihrem Dashboard, um loszulegen.