LiteLLM Proxy
Markdownเกตเวย์ที่ตั้งเอง · OpenAI Chat
คู่มือฉบับเต็ม
| รูปแบบ | ตั้งค่าที่ไหน |
|---|---|
| OpenAI Chat | config.yaml → model_list → litellm_params (model, api_base, api_key); เริ่มใช้งานด้วย litellm --config config.yaml |
การตั้งค่า
คัดลอกการตั้งค่าและแทนที่ sk-... ด้วยคีย์ของคุณจากหน้าบัญชี Ailoot ควรเก็บคีย์ไว้ในตัวแปรสภาพแวดล้อม AILOOT_API_KEYหากแอปรองรับ.
ก่อนเริ่ม ให้เรียก GET /v1/models ด้วยคีย์ Ailoot ของคุณ เลือก ID รุ่นที่ตรงกันและมีเมธอด POST /v1/chat/completions แล้วใช้ ID นั้นในการตั้งค่า สำหรับเอเจนต์ ให้ตรวจสอบการรองรับเครื่องมือและคุณสมบัติที่ไคลเอนต์เวอร์ชันของคุณต้องใช้ด้วย
model_list:
- model_name: claude-sonnet
litellm_params:
model: openai/claude-sonnet-5-5
api_base: https://api.ailoot.ai/v1
api_key: os.environ/AILOOT_API_KEY
- model_name: gpt-sol
litellm_params:
model: openai/gpt-6.1-sol
api_base: https://api.ailoot.ai/v1
api_key: os.environ/AILOOT_API_KEY
# เรียกใช้: litellm --config config.yamlการตั้งค่านี้อ่านคีย์จากตัวแปร AILOOT_API_KEY. กำหนดตัวแปรนี้ก่อนเริ่มแอป:
export AILOOT_API_KEY="sk-..." # เพิ่มใน ~/.zshrc หรือ ~/.bashrcsetx AILOOT_API_KEY "sk-..." # จากนั้นเปิดเทอร์มินัลใหม่ตัวอย่างโมเดล: openai/claude-sonnet-5-5, openai/gpt-6.1-sol. เลือกโมเดลอื่นได้จาก แค็ตตาล็อก — ตรวจสอบว่าโมเดลนั้นรองรับรูปแบบที่ต้องการ.
สิ่งที่ควรทราบ
การทดสอบ
- สำหรับรูปแบบ OpenAI ใช้ที่อยู่
https://api.ailoot.ai/v1(หรือพาธเต็ม หากแอปขอที่อยู่เต็ม). - ลองถามคำถามสั้น ๆ หากได้รับข้อผิดพลาด ให้ดูรหัสและ Request ID แล้วเทียบกับหน้า ข้อผิดพลาดและขีดจำกัด.
- 404 ทันทีหลังตั้งค่ามักหมายถึงที่อยู่ไม่ถูกต้อง โดยใส่ส่วนนี้เกินมาหรือขาดไป
/v1. - 402 หมายถึงยอดเงินไม่พอสำหรับกันวงเงิน เอเจนต์กันวงเงินมากกว่าแชต: เหตุผล.
เอกสารของแอป: https://docs.litellm.ai/docs/providers/openai_compatible
ยังมีคำถามอยู่ใช่ไหม ส่ง Request ID และรายละเอียดมาให้เรา เราจะช่วยตรวจสอบติดต่อฝ่ายสนับสนุน