Mistral: Mistral Medium 3.5 (batch)
Mistral Medium 3.5 нұсқауларды орындауды, пайымдауды және кодтауды тығыз архитектуралы 128B мәтін мен сурет моделінде біріктіреді. Құжат және агент үдерістері үшін өндіруші көрсеткен 256 мың токендік контексті, әр сұрауға арналған пайымдау баптауларын, төл функция шақыруын және құрылымдалған шығысты ұсынады.
Модель туралы
Бұл сипаттама модель мүмкіндіктерін қамтиды. Ailoot жүйесінде таңдалған әдіс үшін қолжетімді кіріс, шығыс және параметрлер төменде берілген.
Mistral Medium 3.5 — Mistral AI компаниясының нұсқауларды орындауды, пайымдауды және кодтауды бір салмақтар жиынында біріктіретін, тығыз архитектуралы 128B моделі. Ол мәтін мен суреттерді қабылдап, мәтін қайтарады. Өндіруші оны агенттік және кодтау тапсырмаларына арнайды, ал сол модель нұсқасы тікелей әңгімелесу жауабын бере алады немесе күрделірек тапсырма үшін құжатталған пайымдау режимін қолдана алады.
Біріктірілген модель және визуалды мүмкіндіктер
Жарияланған карточкада тығыз архитектурадағы 128 млрд параметр және 256 мың токендік контекст терезесі көрсетілген. Оның көру кодтаушысы суреттердің әртүрлі өлшемі мен арақатынасын өңдеуге үйретілген. Суреттер кодтау немесе құжат тапсырмасына дәлел бере алады: интерфейс скриншоты, талапқа қоса берілген сызба немесе модель түсіндіруге тиіс ақпарат бар бет. Нәтиже жасалған сурет емес, жазбаша түсіндірме, код немесе құрылымдалған өрістер болуы мүмкін.
Өндіруші ондаған тілдің, соның ішінде ағылшын, француз, испан, неміс, итальян, португал, нидерланд, қытай, жапон, корей және араб тілдерінің қолдауын сипаттайды. Сондай-ақ жүйелік промптты ұстануды және JSON шығысымен төл функция шақыруын атап көрсетеді. Аудиторияны, тілді және жауап ережелерін зерттелетін материалдан бөлек белгілеңіз: сонда бастапқы құжаттың тұжырымдары тапсырма үшін дәлел болып қалады.
Пайымдау баптаулары
Карточкада әр сұрау үшін пайымдау күшінің екі мәні құжатталған. none мәні пайымдау режимінсіз нұсқаулық сипаттағы жауап береді; high пайымдауды қосады және күрделі промпттар мен агенттік кодтауға ұсынылады. Бұл — басқа модель сәйкестігі емес, сол Medium 3.5 нұсқасының ішіндегі режим таңдауы.
Жоғары пайымдау күші үшін өндіруші temperature 0.7 және top-p 0.95 мәндерін ұсынады. none үшін тапсырмаға қарай temperature мәндерін 0.0 мен 0.7 аралығында көрсетіп, top-p мәнін орнатпайды немесе 1.0 күйінде қалдырады. Бұлар — шығарылым ұсыныстары. Алдымен шығыстың мақсатын таңдаңыз: өрістерді ықшам алу, түсіндірмесі бар код өзгерісі немесе бірнеше негізделген шешімді қажет ететін салыстыру.
Практикалық пайымдау тапсырмасы талапты, іске асыруды және сәйкессіздікті көрсететін кірісті бере алады. Модельден қатысты орындалу жолын анықтауды, айырманы түсіндіруді және ашық интерфейсті сақтайтын ең шағын өзгерісті ұсынуды сұраңыз. Түзетілген кодты жорамалдар мен мысалдардан бөлек сұраңыз. Модель ұсыныс жасайды; оны құрастыру, іске қосу және қолдану агентке қосылған әзірлеу ортасын қажет етеді.
Құралдар, құжаттар және болжамды өңдеулер
Өндірушінің қызмет карточкасында құрылымдалған шығыс, болжамды шығыс, құжат бойынша сұрақтар, жауап префикстері, пакеттік өңдеу және агент әңгімелері де тізілген. Дерек алу үшін өріс атауларын, түрлерін және жетіспейтін мәндердің берілуін анықтаңыз. JSON режимі құрылымдалған көріністі береді, ал арнайы схема қосылған интерфейсте нақтырақ пішінді анықтайды. Бағдарлама талдайтын болса тек жазбаны, ал адам түсіндірмесін тексеруі керек болса бөлек түсіндірмені сұраңыз.
Құжат бойынша сұраққа жауап беру OCR арқылы дайындалған мәтін мен құрылымды тілдік түсінумен біріктіреді. Салыстыру үшін құжаттарды және бағаланатын шартты анықтап, әр қорытындыны дереккөздегі орнымен бірге сұраңыз. Пайдалы шығыс ортақ талаптарды, келіспеушіліктерді және ашық сұрақтарды бөле алады. Тікелей сурет сұрақтары диаграмма белгісіне немесе интерфейс элементіне назар аудара алады; тақырыптарды, өлшем бірліктерін және сурет рөлдерін сақтау жауапты берілген материалмен байланыстырып ұстауға көмектеседі.
Болжамды шығыс қалаған жауаптың көп бөлігі алдын ала белгілі тапсырмалар үшін құжатталған, мысалы шектеулі өңдеулермен код файлын немесе құжатты қайта жасау. Қолданыстағы мазмұнды беріп, сақталуға тиіс бөліктерін қалдыра отырып, нақты өзгерісті көрсетіңіз. Бұл мүлде жаңа артефакт сұраудан немесе белгілі жауап префиксінен жалғастырудан өзгеше. Қызмет мүмкіндіктері жіберу мен пішімдеу нұсқаларын сипаттайды; олар модельдің мәтін мен сурет кірісін немесе мәтін шығысын өзгертпейді.
Құралдар көмегімен орындалатын үдерісте қолданба функция сипаттамалары мен параметрлерін береді, модель функцияны таңдап, аргументтерді дайындайды, ал қолданба оны орындап, нәтижесін қайтарады. Есептеу құралы берілген суреттен оқылған мәндерді қабылдай алады, ал іздеу құралы келесі жауапқа жетіспейтін ақпаратты бере алады. Құрал нәтижесін оны жасаған операциямен байланыстырып сақтаңыз. Агенттік пайымдау мәтін генерациясының өзімен сыртқы әрекеттерді орындауына емес, сол ортаға сүйенеді.
Ұзақ сессияларды дайындау
256 мың токендік контексті байланысты бастапқы кодқа, құжаттарға және әңгіме тарихына пайдаланып, нақты мақсатты айқын ұстаңыз. Кодтау сессиясы бір анықталған өзгерісті сұрағанда модульді, оны шақырушыны және талаптарды сақтай алады. Құжат сессиясы қысқа кесте немесе түзетілген үзінді қайтара отырып, қатысты бөлімдерді бірге сақтай алады. Контекст сыйымдылығы бөлек ең жоғары жауап ұзындығын анықтамайды; карточкадағы 1 024 токендік генерация мысалы — сол шек емес, көрнекі мысал.
Өндіруші ертеректе жарияланған конфигурацияда ұзақ контекст қатесі болғанын және оның туынды модель нұсқаларына қатысты салдарымен бірге түзетілгенін атап өтеді. Салмақтарды ұзақ сессиялар үшін пайдаланғанда түзетілген шығарылым конфигурациясын сақтаңыз. Атаулары ортақ топқа жататындықтан ғана Medium 3.5 моделінің гибридті режимдері мен 128B архитектурасын Medium 3.1 моделіне немесе бөлек аталған draft-head нұсқасына телуге болмайды.
Ailoot Ultra · Пакеттік өңдеу POST /v1/batches mistralai/mistral-medium-3-5:batch
mistralai/mistral-medium-3-5:batch
mistralai/mistral-medium-3-5:batchБастау
Mistral Medium 3.5 нұсқауларды орындауды, пайымдауды және кодтауды тығыз архитектуралы 128B мәтін мен сурет моделінде біріктіреді. Құжат және агент үдерістері үшін өндіруші көрсеткен 256 мың токендік контексті, әр сұрауға арналған пайымдау баптауларын, төл функция шақыруын және құрылымдалған шығысты ұсынады.
- Қабылданатын кіріс деректері
- Мәтін
- Нәтижелер
- Мәтін
Ailoot жүйесінде қолжетімді · кіріс деректері мен әдістер
Ailoot Ultra · Пакеттік өңдеу POST /v1/batches
- Кіріс
text- Шығыс
text- Шығыс пішімі
- Жауаптың ішіндегі results[].response.body JSON деректері
| Өріс | Түрі | Талап | Мәндер мен шектеулер | Әдепкі |
|---|---|---|---|---|
Өрісendpoint | Түріstring | ТалапМіндетті | Мәндер мен шектеулер /v1/chat/completions | Әдепкі— |
Өрісmodel | Түріstring | ТалапМіндетті | Мәндер мен шектеулер mistralai/mistral-medium-3-5:batch | Әдепкі— |
Өрісrequests | Түріbatch_item[] | ТалапМіндетті | Мәндер мен шектеулер Элементтердің ең аз саны: 1 | Әдепкі— |
Өрісrequests[].custom_id | Түріstring | ТалапМіндетті | Мәндер мен шектеулер | Әдепкі— |
Өрісrequests[].body.messages | Түріmessage[] | ТалапМіндетті | Мәндер мен шектеулер | Әдепкі— |
Өрісcompletion_window | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер 24h | Әдепкі— |
Өрісprovider | Түріobject|null | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкі— |
Өрісrequests[].body.model | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер mistralai/mistral-medium-3-5:batch, mistralai/mistral-medium-3-5 | Әдепкі— |
Өрісprovider.only | Түріstring[] | ТалапМіндетті емес | Мәндер мен шектеулер mistral | Әдепкі— |
Өрісprovider.allow_fallbacks | Түріboolean|null | ТалапМіндетті емес | Мәндер мен шектеулер false, null | Әдепкі— |
Әдіс параметрлері мен өмірлік циклі
| Параметр | Параметр талаптары |
|---|---|
Параметрcontent_type | Параметр талаптарыapplication/json |
Параметрrequired | Параметр талаптарыendpoint, model, requests |
Параметрmaterial_types | Параметр талаптарыtext |
Параметрrepresentation | Параметр талаптарыСұрау ішіне енгізілген requests[]; әр элементте custom_id және body бар |
Параметрrequest_endpoint_profile | Параметр талаптары/v1/chat/completions |
Параметрfile_material | Параметр талаптарыСұрауды жіберуші нақты UTF-8 JSONL деректерін жергілікті ортада оқып, requests[] ішіне енгізе алады. Жүктеу мақсаты, input_file_id немесе файлға сілтеме қолданылмайды. Клиент материалы жоқ немесе бос болса, дайындық POST жіберілгенге дейін тоқтатылады. |
Параметрserialization_order | Параметр талаптарыendpoint, model, provider (берілген болса), completion_window (берілген болса), requests өрісін соңында орналастырыңыз |
Параметрoptional_controls | Параметр талаптарыprovider.only, provider.allow_fallbacks, completion_window |
Параметрschema_scope | Параметр талаптарыҚұжаттамада сипатталған, сұраудың ішіне енгізілетін Batch құрылымындағы мәтіндік Chat Completions сұрауларының денелері. |
Өмірлік цикл: asynchronous
GET /v1/batches/{operation_id} · Бастапқы жасау жауабындағы нақты response.id; сол пайдаланушы/кілт/топ
Тарифтер
Тариф анықтамасы сұрау мүмкіндіктерін қоспайды. Қолдау көрсетілетін параметрлер таңдалған әдісте берілген.
- Жылдам режим
- Көрсетілмеген Жылдам режим таңдалғанда
- Икемді режим
- Көрсетілмеген flex режимі таңдалғанда
- Ой қорытудың ең жоғары деңгейі
- Көрсетілмеген Ой қорыту деңгейі ең жоғары болып, default түзетуі қолданылғанда
- Айқын кэштеу бағасы
- Қосылмаған Айқын кэштеу сұралғанда
Ailoot мөлшерлемелері
Баптаулар бойынша бағалар
Әр төлемді көрсетілген шарттармен салыстырыңыз. Балама баптаулардың әр жиыны үшін бір мөлшерлемені қолданыңыз.
| Баптау | Мөлшерлемелер кестесі | Контекст токендерінің саны мынадан көп | Контекст токендерінің саны мынадан аспайды, шегі кіреді | Төлем |
|---|---|---|---|---|
| БаптауТокендердің базалық тарифтері | Мөлшерлемелер кестесіНегізгі мөлшерлеме | Контекст токендерінің саны мынадан көп— | Контекст токендерінің саны мынадан аспайды, шегі кіредіЖоғарғы шегі жоқ | Төлем Кіріс · Кіріс токендері $0.0015 / 1K токен Шығыс · Шығыс токендері $0.0075 / 1K токен Кіріс · Кэшті оқу — / 1K токен Кіріс · Кэшке жазу — / 1K токен Кіріс · Кэшке жазу, 1 сағ — / 1K токен |
| БаптауСұрау ұзындығының 1-деңгейі | Мөлшерлемелер кестесі— | Контекст токендерінің саны мынадан көп0 | Контекст токендерінің саны мынадан аспайды, шегі кіредіЖоғарғы шегі жоқ | Төлем Кіріс · Кіріс токендері $0.0015 / 1K токен Шығыс · Шығыс токендері $0.0075 / 1K токен Кіріс · Кэшті оқу — / 1K токен Кіріс · Кэшке жазу — / 1K токен Кіріс · Кэшке жазу, 1 сағ — / 1K токен |
Ailoot сұрау алдында болжамды соманы резервтейді. Нәтижеден кейін өлшенген пайдалану көлемі бойынша қорытынды төлемді шегереді. Ағындық жауап үшін төлем соңғы пайдалану жазбасы негізінде шегеріледі. Резервтеу мен төлемді есептеу тәртібі →
Сұрау мысалдары
Ailoot Ultra · Пакеттік өңдеу
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
python3 - <<'PY_REQUEST'
import json
from pathlib import Path
body=json.loads('{"endpoint":"/v1/chat/completions","model":"mistralai/mistral-medium-3-5:batch","requests":[{"custom_id":"req-0001","body":{"messages":[{"role":"user","content":"Hello!"}],"max_tokens":16}}]}')
Path("batch-request.json").write_text(json.dumps(body,ensure_ascii=False),encoding="utf-8")
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/batches \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @batch-request.json -D batch-response-headers.txt -o batch-create-response.json
import json, os
from pathlib import Path
from urllib.request import Request, urlopen
def prepare_requests(customer_path):
path = Path(customer_path)
if not path.is_file(): raise ValueError("Customer JSONL file is missing")
items = [json.loads(line) for line in path.read_text(encoding="utf-8").splitlines() if line.strip()]
if not items: raise ValueError("Customer JSONL contains no requests")
ids = set()
for item in items:
if set(item) != {"custom_id", "body"}: raise ValueError("Each item needs custom_id and body")
cid = item["custom_id"]
if not isinstance(cid, str) or not cid.strip() or cid in ids: raise ValueError("custom_id must be nonempty and unique")
ids.add(cid)
if not isinstance(item["body"], dict) or not item["body"].get("messages"): raise ValueError("Supply actual text messages")
supplied_model = item["body"].get("model")
if supplied_model is not None and supplied_model not in ['mistralai/mistral-medium-3-5:batch', 'mistralai/mistral-medium-3-5']: raise ValueError("body.model must be an exact documented caller or wire ID")
return {"endpoint":"/v1/chat/completions", "model":"mistralai/mistral-medium-3-5:batch", "requests":items}
if __name__ == "__main__":
material = os.environ.get("AILOOT_BATCH_REQUESTS_JSONL", "")
if not material: raise SystemExit("Set AILOOT_BATCH_REQUESTS_JSONL to your actual customer file")
body = prepare_requests(material)
key = os.environ.get("AILOOT_API_KEY", "")
if not key: raise SystemExit("Set AILOOT_API_KEY")
request = Request("https://api.ailoot.ai/v1/batches", data=json.dumps(body, ensure_ascii=False).encode("utf-8"), headers={"Authorization":"Bearer " + key, "Content-Type":"application/json"}, method="POST")
with urlopen(request) as response:
raw = response.read()
Path("batch-create-response.json").write_bytes(raw)
print(raw.decode("utf-8"))
import json
from pathlib import Path
raw = Path("batch-status-response.json").read_bytes()
response = json.loads(raw)
if response.get("status") != "completed":
raise SystemExit("Keep the original operation; read its status without resubmitting")
results = response.get("results")
if not isinstance(results, list) or not results:
raise SystemExit("Preserve the original response; completed results are missing")
Path("batch-results.jsonl").write_text("".join(json.dumps(item, ensure_ascii=False) + "\n" for item in results), encoding="utf-8")
# Preserve batch-status-response.json with aggregate usage and every result/error.
Нәтижелерді алу және сақтау
Ailoot Ultra · Пакеттік өңдеу
Жауаптың ішіндегі results[].response.body JSON деректері
GET /v1/batches/{operation_id}
Тапсырма күйін тексеру
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
BATCH_OPERATION_ID="$(python3 - <<'PY_ID'
import json
from pathlib import Path
from urllib.parse import quote
response = json.loads(Path("batch-create-response.json").read_text(encoding="utf-8"))
operation = response.get("id")
if not isinstance(operation, str) or not operation: raise SystemExit("No actual original operation ID; preserve the response and do not resubmit")
print(quote(operation, safe=""))
PY_ID
)"
curl --fail-with-body --silent --show-error "https://api.ailoot.ai/v1/batches/$BATCH_OPERATION_ID" \
-H "Authorization: Bearer $AILOOT_API_KEY" -o batch-status-response.json
Барлық дайын нәтижені сақтау
Қайтарылған әр толық жауапты, файлды және мазмұн бөлігін сақтаңыз.
Бастапқы күй туралы толық JSON деректерін, әрбір нәтижені/custom_id мәнін және жауаптың немесе қатенің толық денесін сақтаңыз. Аяқталған results[] деректерін сүзгілемей JSONL түрінде сақтаңыз.
Бастапқы жауапты тексеру қажет болса
Бастапқы операцияның ID мәнін сақтаңыз. 503 result_pending_check жауабында X-Should-Retry:false көрсетіледі; нәтижесі белгісіз бастапқы пакетті ешқашан қайта жібермеңіз.
Жауап өрістері
| Өріс | Түрі |
|---|---|
Өрісresults[].custom_id | Түріstring |
Өрісresults[].response.body.choices[].message.content | Түріstring|null |
Өрісresults[].error | Түріobject|null |
Өрісusage | Түріobject|null |
Өрісid | Түріstring |
Өрісmodel | Түріstring |
Өрісendpoint | Түріstring |
Өрісstatus | Түріstring |
Өрісrequest_counts | Түріobject |
Өрісresults[].id | Түріstring |
Өрісresults[].response.status_code | Түріinteger |
Өрісresults[].response.request_id | Түріstring |
Қателер және келесі қадамдар
| Жауап | Шарт | Келесі қадам |
|---|---|---|
Жауап400 · invalid_request_error | ШартҚұжаттамада сипатталған сұрау ішіндегі құрылым жарамсыз, кілттер қайталанады, элементтің сәйкестігі бұзылған немесе бапталған модель мүмкіндіктері арасында қайшылық бар. | Келесі қадамЖаңадан жібермес бұрын көрсетілген өрістерді түзетіңіз. |
Жауап401 · authentication_error | ШартЖарамсыз API кілті. | Келесі қадамПайдалануға рұқсат берілген Ailoot кілтін қолданыңыз. |
Жауап403 · permission_error | ШартПакеттік өңдеу тобы қолжетімсіз. | Келесі қадамКілттің/топтың қол жеткізу құқығын тексеріңіз. |
Жауап422 · invalid_request_error | ШартBatch төлемді баланстан алады; жазылыммен төленетін жасау сұрауы қабылданбайды. | Келесі қадамБаланстан төлем алынатын, пайдалануға рұқсат берілген топты қолданыңыз. |
Жауап422 · price_unavailable | ШартBatch кіріс деректерінің құнын алдын ала есептеу мүмкін емес. | Келесі қадамЖауапты сақтаңыз; осы әдістер тобы үшін құжаттамада сипатталған кіріс деректерін қолданыңыз. |
Жауап402 · billing_error | ШартПакеттік өңдеу үшін қаражатты резервтеу қолжетімсіз. | Келесі қадамЖаңа сұрау жібермес бұрын сұрауды қабылдау мәселесін шешіңіз. |
Жауап503 · price_unavailable | ШартBatch әдісінің бағасы/жүйенің төл тарифтері қолжетімсіз. | Келесі қадамЖауапты сақтаңыз; бағаларды басқа мәндермен алмастырмаңыз. |
Жауап503 · api_error | ШартПровайдердің осы нақты маршруты қолжетімсіз. | Келесі қадамМаршрутты түзету үшін жауапты сақтаңыз. |
Жауап503 · result_pending_check | ШартБастапқы нәтижені тексеру қажет; X-Should-Retry:false. | Келесі қадамБастапқы operation_id/id мәнін сақтап, оның күйін оқыңыз; бастапқы POST сұрауын ешқашан қайталамаңыз. |
Жауап404 · not_found | ШартBatch күйін тексеретін операция жоқ немесе басқа субъектіге тиесілі. | Келесі қадамБастапқы id мәнін дәл қолданыңыз және сол пайдаланушыны/кілтті/топты пайдаланыңыз. |
Балама атаулар
Модельдердің балама атаулары
Ailoot Ultra mistralai/mistral-medium-3-5:batch
Әдіс жолдарының балама атаулары
Жоғарыда көрсетілген әдіс жолдарын пайдаланыңыз.
Шақыруға арналған байланысты ID
FAQ · Mistral: Mistral Medium 3.5 (batch)
- Қандай кіріс деректері мен нәтижелер қолжетімді?
POST /v1/batches·mistralai/mistral-medium-3-5:batch:text→text- Сұрау қандай өрістерді пайдаланады?
POST /v1/batches·mistralai/mistral-medium-3-5:batch:endpoint,model,requests,completion_window,provider- Қандай шектеулер қолданылады?
POST /v1/batches·mistralai/mistral-medium-3-5:batch:requests.min_items:1