Qu'est-ce que LiteLLM ?
LiteLLM expose une API unifiée compatible OpenAI routant vers Azure, Anthropic, Bedrock et des dizaines d'autres fournisseurs. Les équipes l'utilisent pour changer de modèles, imposer des budgets et centraliser l'accès LLM.
Passerelle proxy compatible OpenAI pour 100+ fournisseurs LLM
LiteLLM expose une API unifiée compatible OpenAI routant vers Azure, Anthropic, Bedrock et des dizaines d'autres fournisseurs. Les équipes l'utilisent pour changer de modèles, imposer des budgets et centraliser l'accès LLM.
Connectez-vous à votre tableau de bord Kubeara et connectez un serveur si ce n'est pas déjà fait.
Ouvrez le catalogue Services et sélectionnez LiteLLM.

Vérifiez les paramètres préconfigurés et cliquez sur Déployer.

LiteLLM est maintenant en cours d'exécution sur votre serveur Kubeara. Ouvrez l'URL du service depuis votre tableau de bord pour commencer.