Mistral: Voxtral Mini TTS

Voxtral TTS je model generování řeči od Mistral AI se 4 miliardami parametrů a adaptací hlasu podle reference v devíti jazycích. Převádí připravený text na expresivní zvuk, podporuje opakovaně použitelné i jednorázové hlasové reference a streamování a vytváří výstup 24 kHz v dokumentovaných zvukových formátech.

Ailoot Ultra · Převod na řeč POST /v1/audio/speech mistralai/voxtral-mini-tts-2603

O modelu

Tento popis zahrnuje schopnosti modelu. Vstupy, výstupy a možnosti dostupné v Ailoot jsou uvedeny níže pro vybranou metodu.

Voxtral TTS je model převodu textu na řeč od Mistral AI se 4 miliardami parametrů pro generování mluveného zvuku z textu a hlasové reference. Modelová stránka výrobce identifikuje verzi 2603 jako voxtral-mini-tts-2603, zatímco karta vydaných vah se jmenuje Voxtral 4B TTS 2603. Tento záznam se týká uvedeného vydání pro generování řeči, odlišného od porozumění zvuku Voxtral Small, přepisu a pozdějších vstupních modelů pro reálný čas.

Expresivní řeč a adaptace hlasu

Model je navržen pro zachycení pauz, rytmu, intonace, přízvuku a emočního podání referenčního hlasu. Hlas funguje jako pokyn, jak má text znít; přehled výrobce nevyžaduje samostatné značky prozodie nebo emocí ani přepis referenční nahrávky. Zdrojový text určuje, co se říká, zatímco zvuková reference usměrňuje přednes.

Přehled popisuje adaptaci hlasu již ze dvou až tří sekund zvuku. Popis architektury hovoří o hlasových referencích v délce pěti až dvaceti pěti sekund. Tato tvrzení mají odlišný rozsah: příklad krátké adaptace není požadavkem používat co nejkratší referenci. Vyberte čistou řeč představující styl a přízvuk požadovaný pro konečný výsledek.

Vydaná karta zahrnuje dvacet přednastavených hlasů a adaptaci na nové hlasy. Řečový postup výrobce může používat uložený profil hlasu nebo jednorázový referenční klip. Uložení profilu umožňuje tutéž hlasovou referenci znovu používat v samostatných řečových požadavcích, zatímco jednorázový klip ji dodává pro aktuální úkol. Profil a generovaná nahrávka jsou různé výstupy.

Jazyky a přednes napříč jazyky

Vydání podporuje angličtinu, francouzštinu, španělštinu, němčinu, italštinu, portugalštinu, nizozemštinu, arabštinu a hindštinu; výrobce popisuje dialektové varianty, přenos hlasu mezi jazyky a míchání jazyků. Pro nejlepší výsledek příručka řeči doporučuje shodu jazyka reference s jazykem textu. Přenos mezi jazyky může zachovat přízvuk reference a zároveň vyslovit připravený text v jiném podporovaném jazyce.

Praktické vyprávění může používat stejný hlasový styl pro vysvětlení v různých podporovaných jazycích, přičemž každý text je připraven pro zamýšleného posluchače. Odpověď hlasového asistenta může použít krátký konverzační scénář místo čtení neupraveného dokumentu nahlas. Model převodu textu na řeč přednáší připravená slova; případný překlad nebo psaní odpovědi, které tato slova vytváří, je samostatným krokem.

Příprava textu

Příručka řeči výrobce doporučuje text vhodný k vyslovení. Čísla a symboly pište v podobě, která má zaznít, aby model nemusel volit mezi možnými čteními. Číslo může znamenat množství, čas nebo identifikátor; zamýšlené mluvené znění určete před syntézou. Pokud záleží na výslovnosti, rozepište zkratky a tam, kde je to zamýšlené čtení, použijte oddělená písmena.

Vyhněte se bohatému formátování, emoji a zvláštním znakům, které nebudou vyjádřeny jako mluvený obsah. Připravte úplné věty s interpunkcí a zněním potřebným pro přednes. Příručka doporučuje pro nejlepší výsledky zadání pod 300 slov. Jde o doporučení kvality, nikoli o deklarovanou pevnou maximální délku vstupu.

U vysvětlení postupu napište akci a podmínku ve větě, kterou posluchač dokáže sledovat. U oznámení umístěte důležité informace před volitelné podrobnosti. U hlasové odpovědi zachovejte faktickou odpověď a odstraňte formátování pouze pro zobrazení nebo zápis zdrojů, který nemá zaznít. Tyto přípravy činí samotný scénář vhodným pro zvuk, ještě než reference určí jeho styl.

Streamování, výstup a délka

Výrobce dokumentuje základní i streamované dodání a popisuje nativní generování až dvou minut zvuku. Karta vydaných vah také uvádí dávkovou inferenci pro přípravu více řečových úkolů. Delší generování služby používají prokládání, místo aby se jedna nativní část považovala za neomezenou. U delšího vyprávění připravte souvislé oddíly a přípravu hlasu i textu udržujte v souladu s postupem dodávání zajišťujícím pokračování.

Vydaná karta specifikuje zvuk 24 kHz a uvádí výstupní formáty WAV, PCM, FLAC, MP3, AAC a Opus. Příručka řečové služby popisuje MP3 pro komprimované dodání, WAV pro nekomprimovaný PCM, FLAC pro bezeztrátovou kompresi a PCM či Opus pro streamování. Vyberte formát podporovaný připojeným postupem a vhodný pro jeho přehrávač nebo zpracování. Volba formátu a chování streamování jsou oddělené od samotné adaptace hlasu.

Architektura modelu a praktické hranice

Oznámení popisuje autoregresivní architekturu s flow matching, se základním dekodérem Transformer s 3,4 miliardy parametrů, akustickým Transformerem o 390 milionech parametrů a neuronovým zvukovým kodekem o 300 milionech parametrů. Dekodér předpovídá sémantický obsah a akustická složka vytváří reprezentaci řeči, zatímco kodek zpracovává zvuk. Tyto složky vysvětlují přibližné označení modelu 4B; nejsou dalšími vstupními jazyky ani jiným modelem pro tvorbu odpovědí.

Praktickým výstupem je syntetizovaná nahrávka nebo zvukový proud spojený s připraveným scénářem a vybraným hlasem. Při generování několika oddílů tyto vazby zachovejte, aby aplikace mohla uložit, přehrát nebo sestavit správný materiál. Model vytváří zvuk, nikoli přepis, vektor pro sémantické vyhledávání nebo nově napsanou faktickou odpověď.

Zachovejte řečovou verzi 2603, podporovaný jazyk a styl reference. Přečtené zdroje poskytují tvrzení o nativních dvou minutách a doporučení přípravy pod 300 slov, ale nestanovují samostatný pevný maximální limit znaků textu ani celkovou délku pospojované nahrávky. Hotový zvukový výstup určete podle skutečného textu, hlasu a požadavků na dodání.

Ailoot Ultra · Převod na řeč POST /v1/audio/speech mistralai/voxtral-mini-tts-2603

mistralai/voxtral-mini-tts-2603

Mistral /mistralai/voxtral-mini-tts-2603

Úvod

Přijímané vstupy: Text
Výsledky: Zvuk

Dostupné v Ailoot · vstupy a metody

Ailoot Ultra · Převod na řeč POST /v1/audio/speech

Vstup: text
Výstup: audio
Výstupní formát: mp3

Pole	Typ	Požadavek	Hodnoty a limity	Výchozí
Pole`model`	Typ`string`	PožadavekPovinné	Hodnoty a limity mistralai/voxtral-mini-tts-2603	Výchozí—
Pole`input`	Typ`string`	PožadavekPovinné	Hodnoty a limity Minimální délka: 1 Jednotka: znaky Unicode	Výchozí—
Pole`voice`	Typ`string`	PožadavekPovinné	Hodnoty a limity en_paul_sad, en_paul_neutral, en_paul_happy, en_paul_frustrated, en_paul_excited, en_paul_confident, en_paul_cheerful, en_paul_angry, gb_oliver_neutral, gb_oliver_sad, gb_oliver_excited, gb_oliver_curious, gb_oliver_confident, gb_oliver_cheerful, gb_oliver_angry, gb_jane_sarcasm, gb_jane_confused, gb_jane_shameful, gb_jane_sad, gb_jane_neutral, gb_jane_jealousy, gb_jane_frustrated, gb_jane_curious, gb_jane_confident, fr_marie_sad, fr_marie_neutral, fr_marie_happy, fr_marie_excited, fr_marie_curious, fr_marie_angry	Výchozí—
Pole`response_format`	Typ`string`	PožadavekPovinné	Hodnoty a limity mp3	Výchozí—

Kombinace vstupních materiálů

text_to_speech · Povinné: input

Parametry a životní cyklus metody

Parametr	Kontrakt
Parametr`content_type`	Kontraktapplication/json
Parametr`required`	Kontraktmodel, input, voice, response_format
Parametr`voice_ids`	Kontrakten_paul_sad, en_paul_neutral, en_paul_happy, en_paul_frustrated, en_paul_excited, en_paul_confident, en_paul_cheerful, en_paul_angry, gb_oliver_neutral, gb_oliver_sad, gb_oliver_excited, gb_oliver_curious, gb_oliver_confident, gb_oliver_cheerful, gb_oliver_angry, gb_jane_sarcasm, gb_jane_confused, gb_jane_shameful, gb_jane_sad, gb_jane_neutral, gb_jane_jealousy, gb_jane_frustrated, gb_jane_curious, gb_jane_confident, fr_marie_sad, fr_marie_neutral, fr_marie_happy, fr_marie_excited, fr_marie_curious, fr_marie_angry
Parametr`response_format`	Kontraktmp3
Parametr`max_input_characters`	Kontraktnull
Parametr`other_options`	Kontraktfalse
Parametr`input`	Kontraktpřesný text UTF-8; počet znaků Unicode bez normalizace
Parametr`material_types`	Kontrakttext

Životní cyklus: synchronous_result_then_owned_library

GET /v1/media/tasks/{task_id} · skutečně vrácené task_id nebo záznam v knihovně médií

GET /v1/media/assets/{asset_id}/content

GET /v1/media/assets

GET /v1/media/assets/{asset_id}

Vyberte přesný hlas z tohoto profilu modelu.

Vstupní znaky a sekundy zvuku jsou různé měrné jednotky.

Tarify

Údaje o tarifech nepřidávají možnosti požadavku. Podporované parametry jsou uvedeny u vybrané metody.

Rychlý režim: Neuvedeno Při výběru rychlého režimu
Režim flex: Neuvedeno Při výběru režimu flex
Maximální intenzita uvažování: Neuvedeno Když se při maximální intenzitě uvažování použije výchozí úprava (default)

Sazby Ailoot

Ceny podle konfigurace

Přiřaďte každý poplatek k uvedeným podmínkám. Pro každou sadu alternativních konfigurací použijte jednu sazbu.

Konfigurace	Tabulka sazeb	Účtované množství	Účtovací jednotka	Poplatek
KonfiguraceZákladní sazby za tokeny	Tabulka sazebZákladní sazba	Účtované množství—	Účtovací jednotka—	Poplatek Vstup · Vstupní tokeny — / 1K tokenů Výstup · Výstupní tokeny — / 1K tokenů Vstup · Čtení z mezipaměti — / 1K tokenů Vstup · Zápis do mezipaměti — / 1K tokenů Vstup · Zápis do mezipaměti, 1 hodina — / 1K tokenů
KonfiguraceUltra	Tabulka sazeb—	Účtované množstvíKaždý kódový bod Unicode se počítá jako jeden znak, včetně znaků Han.	Účtovací jednotkaza 1K vstupních znaků	Poplatek Vstup · vstupní znak $0.032 za 1K vstupních znaků

Podrobnosti referenčního tarifu

Referenční tabulky modelu nemění výběr metody, cenové nabídky ani poplatky. Skutečné poplatky používají sazby vybrané metody Ailoot.

Mistral: Voxtral Mini TTS

Ceny podle konfigurace

Konfigurace	Podmínky účtování	Poplatek
KonfiguraceMistral: Voxtral Mini TTS · Výchozí konfigurace	Podmínky účtováníVýchozí konfigurace	Poplatek Vstup · Vstupní znaky 0,000032 US$ za vstupní znak

Ailoot před požadavkem rezervuje odhadovanou částku. Po výsledku vyúčtuje konečný poplatek podle naměřeného využití. Při streamování se účtování řídí konečným záznamem využití. Jak funguje rezervace a vyúčtování →

Příklady požadavků

Ailoot Ultra · Převod na řeč

curl

set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_VOICE_ID:?Choose an accepted voice ID from this exact model profile}"
export AILOOT_VOICE_ID
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
p=json.loads('{"model": "mistralai/voxtral-mini-tts-2603", "input": "Good afternoon! This is a short voice take."}')
voice=os.environ["AILOOT_VOICE_ID"]
allowed=json.loads('["en_paul_sad", "en_paul_neutral", "en_paul_happy", "en_paul_frustrated", "en_paul_excited", "en_paul_confident", "en_paul_cheerful", "en_paul_angry", "gb_oliver_neutral", "gb_oliver_sad", "gb_oliver_excited", "gb_oliver_curious", "gb_oliver_confident", "gb_oliver_cheerful", "gb_oliver_angry", "gb_jane_sarcasm", "gb_jane_confused", "gb_jane_shameful", "gb_jane_sad", "gb_jane_neutral", "gb_jane_jealousy", "gb_jane_frustrated", "gb_jane_curious", "gb_jane_confident", "fr_marie_sad", "fr_marie_neutral", "fr_marie_happy", "fr_marie_excited", "fr_marie_curious", "fr_marie_angry"]')
if voice not in allowed: raise SystemExit("Choose an accepted voice ID from this exact model profile")
p["voice"]=voice
p["response_format"]="mp3"
Path("request.json").write_text(json.dumps(p,ensure_ascii=False))
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/audio/speech \
  -H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
  --data-binary @request.json -D response-headers.txt -o speech.mp3

Přijímání a ukládání výsledků

Ailoot Ultra · Převod na řeč

mp3

GET /v1/media/tasks/{task_id}
GET /v1/media/assets/{asset_id}/content
GET /v1/media/assets
GET /v1/media/assets/{asset_id}

Další načtení obsahu

Knihovna médiíStav úlohyPodrobnosti souboru

set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/media/assets \
  -H "Authorization: Bearer $AILOOT_API_KEY" -o media-assets.json

set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_MEDIA_TASK_ID:?Set the actual ID returned by the response or media-library metadata}"
export AILOOT_MEDIA_TASK_ID
resource_id=$(python3 -c 'import os,urllib.parse;print(urllib.parse.quote(os.environ["AILOOT_MEDIA_TASK_ID"],safe=""))')
curl --fail-with-body --silent --show-error "https://api.ailoot.ai/v1/media/tasks/$resource_id" \
  -H "Authorization: Bearer $AILOOT_API_KEY" -o media-task.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
print(json.dumps(json.loads(Path("media-task.json").read_text())))
PY_RESULT

set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_ASSET_ID:?Set the actual ID returned by the response or media-library metadata}"
export AILOOT_ASSET_ID
resource_id=$(python3 -c 'import os,urllib.parse;print(urllib.parse.quote(os.environ["AILOOT_ASSET_ID"],safe=""))')
curl --fail-with-body --silent --show-error "https://api.ailoot.ai/v1/media/assets/$resource_id" \
  -H "Authorization: Bearer $AILOOT_API_KEY" -o media-asset.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
print(json.dumps(json.loads(Path("media-asset.json").read_text())))
PY_RESULT

Uchovejte všechny dokončené výsledky

Uchovejte každou úplnou vrácenou odpověď, soubor i část obsahu.

Uchovejte úplný binární výsledek a hlavičky. Pokud odpověď obsahuje JSON nebo více výstupů, uchovejte všechny datové položky a stáhněte každý soubor ze skutečně vrácené podepsané URL.

Pokud je nutné ověřit původní odpověď

Uchovejte původní operation_id/X-Client-Request-ID pro spárování záznamů bez opětovného odeslání; samostatná trasa pro dotazování na stav zvuku neexistuje.

Pole odpovědi

Pole	Typ
Pole`binary audio`	Typbytes
Pole`response headers`	Typheaders

Chyby a další kroky

Odpověď	Podmínka	Další krok
Odpověď400 · `invalid_request_error`	PodmínkaNeplatná povinná pole, reprezentace podkladů nebo hodnota parametru	Další krokPřed novým požadavkem na vytvoření opravte uvedená pole.
Odpověď`server_error`	PodmínkaVrácená odpověď uvádí, že operaci nebo výsledek je třeba zkontrolovat	Další krokUchovejte původní vrácené ID operace nebo úlohy, hlavičky požadavku a odpověď; pokračujte v podporovaném načítání údajů o této původní operaci. Požadavek na vytvoření znovu neodesílejte.

Aliasy

Aliasy modelu

Ailoot Ultra mistralai/voxtral-mini-tts-2603

Aliasy cest metod

Použijte cesty metod uvedené výše.

Související ID modelů

mistralai/voxtral-mini-tts-2603

FAQ · Mistral: Voxtral Mini TTS

Jaké vstupy a výsledky jsou dostupné?: POST /v1/audio/speech · mistralai/voxtral-mini-tts-2603: text → audio
Jaká pole požadavek používá?: POST /v1/audio/speech · mistralai/voxtral-mini-tts-2603: model, input, voice, response_format

Mistral: Voxtral Mini TTS