LiteLLM
MarkdownSDK · OpenAI Chat
Úplný průvodce
| Formát | Kde nastavit |
|---|---|
| OpenAI Chat | litellm.completion(model="openai/<id>", api_base=..., api_key=...) |
Nastavení
Zkopírujte konfiguraci a nahraďte sk-... svým klíčem z účtu Ailoot. Klíč je lepší uložit do proměnné prostředí AILOOT_API_KEY, pokud to aplikace umožňuje.
Před spuštěním zavolejte GET /v1/models se svým klíčem Ailoot. Vyberte přesné ID modelu, jehož metody zahrnují POST /v1/chat/completions, a použijte je v konfiguraci. U agentů ověřte také podporu nástrojů a funkce potřebné pro vaši verzi klienta.
import os
import litellm
r = litellm.completion(
model="openai/claude-sonnet-5-5",
api_base="https://api.ailoot.ai/v1",
api_key=os.environ["AILOOT_API_KEY"],
messages=[{"role": "user", "content": "Ahoj"}])
print(r.choices[0].message.content)
# embeddingy: litellm.embedding(model="openai/nemotron-3-embed", api_base="https://api.ailoot.ai/v1", api_key=os.environ["AILOOT_API_KEY"], input=["text"])Příklad modelu: openai/claude-sonnet-5-5, openai/qwen3.8-max, openai/nemotron-3-embed. Jakýkoli jiný model vyberte z katalogu – ověřte, že podporuje požadovaný formát.
Co je dobré vědět
Ověření
- Adresa pro formát OpenAI je
https://api.ailoot.ai/v1(nebo úplná cesta, pokud aplikace vyžaduje úplnou adresu). - Položte krátkou otázku. Pokud se objeví chyba, podívejte se na kód a Request ID a porovnejte je s informacemi na stránce Chyby a limity.
- Chyba 404 hned po nastavení téměř vždy znamená nesprávnou adresu: nadbytečné nebo chybějící
/v1. - Chyba 402 – zůstatek nestačí na rezervu. Agenti rezervují více než chat: proč.
Dokumentace aplikace: https://docs.litellm.ai/docs/providers/openai_compatible
Máte další dotazy? Pošlete Request ID a popis – pomůžeme situaci objasnit.Napsat podpoře