Fish Audio: S2.1 Pro

Fish Audio S2.1 Pro vytvára expresívnu viacjazyčnú reč a natívny dialóg viacerých hovoriacich, so zlepšenou kvalitou, latenciou a priepustnosťou oproti S2 Pro. Prednes riaďte priamo v scenári a hlasové referencie používajte na tvorbu komentára alebo konverzačného zvuku.

Ailoot Ultra · Reč POST /v1/audio/speech fish-audio/s2.1-pro

O modeli

Tento opis pokrýva možnosti modelu. Dostupné vstupy, výstupy a voľby v Ailoot sú uvedené nižšie pre vybranú metódu.

S2.1 Pro je neskorší model generácie S2 od Fish Audio na prevod textu na reč pre expresívny komentár a konverzačné hlasové aplikácie. Oproti S2 Pro zlepšuje kvalitu reči, latenciu a priepustnosť a zachováva ovládanie prednesu prirodzeným jazykom aj natívny dialóg viacerých hovoriacich. S2.1 Pro a S2.1 Pro Free zdieľajú základný rečový model.

Pri hovorenom vysvetlení dodajte hotové znenie, zamýšľaný hlas a miesta, kde sa má meniť tempo alebo dôraz. Pri konverzačnej aplikácii syntetizujte odpoveď vybranú aplikáciou a oddeľujte jej vecný obsah od pokynov na prednes. Pri scenárovom rozhovore definujte hovoriacich a ich hlasy pred písaním replík. Užitočným výsledkom je úplná zvuková pasáž alebo prehrateľný stream, ktorého slová, prednes a roly hovoriacich zodpovedajú zadaniu.

Napíšte slová, ktoré majú skutočne zaznieť, a pokyn umiestnite bezprostredne pred pasáž, ktorej prednes sa má zmeniť. Pokyny v hranatých zátvorkách môžu vyjadrovať šepot, pauzu, reakciu, dôraz alebo voľne opísaný štýl reči. Zmenu uprostred vety vložte na miesto, kde ju prednes vyžaduje, a po opisných pokynoch uveďte skutočný hovorený text. Užitočné zadanie vysvetľujúcej nahrávky oddeľuje vecné znenie od požadovanej srdečnosti, tempa či dôrazu pre poslucháča.

Pri jednom hovoriacom vyberte uložený identifikátor hlasu alebo dodajte referenčnú nahrávku s jej prepisom. Príručka výrobcu pre syntézu reči odporúča na okamžité prispôsobenie hlasu čistú vzorku dlhú 10–30 sekúnd. Vyberte referenciu s tónom a kvalitou záznamu vhodnými pre scenár a pri súvisiacich pasážach zachovajte tú istú referenciu. Hlasová referencia určuje zvuk hlasu hovoriaceho; text a vložené pokyny určujú obsah a jeho prednes.

Natívna syntéza s viacerými hovoriacimi používa značky ako <|speaker:0|> a <|speaker:1|> spolu s usporiadaným poľom identifikátorov hlasov alebo samostatnými skupinami referencií. Číselné označenia hovoriacich musia zodpovedať tomuto poradiu. Pri výučbovom rozhovore napíšte repliku každého hovoriaceho a pokyn na prednes vložte za značku hovoriaceho na príslušné miesto. Takto vzniká dialóg v jednej požiadavke; ide o iný postup než samostatné jednohlasové úseky S1 a ich následné zostavenie.

Postup výrobcu ponúka výstup vo formátoch MP3, WAV, surový PCM a Opus, pričom predvolený je MP3. MP3 podporuje 64, 128 a 192 kbps; WAV a PCM používajú zdokumentované 16-bitové monofónne formáty vzoriek, zatiaľ čo Opus používa 48 kHz. Formát vyberte podľa toho, či potrebujete uchovaný súbor s komentárom, streamované prehrávanie alebo nadväzujúce spracovanie zvuku. Spolu so zvukom uchovajte celý scenár a výber hlasu, aby neskoršia úprava jednej repliky nenarušila zamýšľaný prednes.

Rýchlosť možno nastaviť od 0,5 do 2,0 a k dispozícii je aj ovládanie hlasitosti. Normalizácia textu rozpisuje anglické a čínske číselné zápisy pre prirodzené čítanie. Normalizácia hlasitosti výstupu má predvolenú hodnotu true a uplatňuje sa v rodine S2; rovnaké pole v S1 nemalo účinok. Parameter repetition_penalty zo S1 nemení zvuk S2.1 Pro, preto staré nastavenie nemožno považovať za účinný ovládací prvok tohto modelu. Opakované zvuky a slová kontrolujte priamo, namiesto spoliehania sa na prevzatý parameter ako dôkaz správneho výsledku.

Dlhšie scenáre sa spracúvajú po častiach. Zdokumentovaný rozsah dĺžky časti je 100–300 a max_new_tokens predstavuje rozpočet zvukových tokenov pre jednu časť, nie záruku celkového trvania. Podmieňovanie predchádzajúcou časťou môže prenášať hlasový kontext ďalej. Postup doručenia výrobcu opisuje úplný zvukový výstup, postupné zvukové časti aj živé streamovanie textu, keď scenár prichádza priebežne. Spôsob prijímania vyberte podľa aplikácie a zachovajte dostatok kontextu scenára pre výslovnosť a tón nasledujúcej pasáže.

Pri kontrole užitočného výsledného súboru počúvajte, či nechýbajú alebo sa neopakujú slová, či sú čísla vyslovené správne a či zodpovedajú zmeny hovoriacich, pauzy a intenzita pokynov. Rôzne hlasové referencie môžu ten istý pokyn interpretovať s rôznou intenzitou, preto pred pridaním konkurenčných značiek začnite jednoduchou replikou s pokynom. Pri viacjazyčnej práci dodajte scenár v cieľovom jazyku a nežiadajte rečový model, aby jeho obsah vymýšľal alebo prekladal. Cielená úprava mení repliku, pokyn alebo referenciu zodpovednú za nesúlad a zachováva časti prednesu, ktoré už zadaniu vyhovujú.

Ailoot Ultra · Reč POST /v1/audio/speech fish-audio/s2.1-pro

fish-audio/s2.1-pro

Fish Audio /fish-audio/s2.1-pro

Úvod

Povolené vstupy: Text
Výsledky: Audio

Dostupné v Ailoot · vstupy a metódy

Ailoot Ultra · Reč POST /v1/audio/speech

Vstup: text
Výstup: audio

Pole	Typ	Požiadavka	Hodnoty a limity	Predvolené
Pole`model`	Typ`string`	PožiadavkaPovinné	Hodnoty a limity fish-audio/s2.1-pro	Predvolené—
Pole`input`	Typ`string`	PožiadavkaPovinné	Hodnoty a limity Minimálna dĺžka: 1	Predvolené—
Pole`voice`	Typ`string`	PožiadavkaPovinné	Hodnoty a limity b347db033a6549378b48d00acb0d06cd Minimálna dĺžka: 1	Predvolené—
Pole`response_format`	Typ`string`	PožiadavkaVoliteľné	Hodnoty a limity mp3, pcm	Predvolenépcm
Pole`provider`	Typ`object`	PožiadavkaVoliteľné	Hodnoty a limity	Predvolené—

Parametre a životný cyklus metódy

Parameter	Špecifikácia
Parameter`content_type`	Špecifikáciaapplication/json
Parameter`required`	Špecifikáciamodel, input, voice
Parameter`material_types`	Špecifikáciatext

Životný cyklus: synchronous_result_then_owned_library

GET /v1/media/tasks/{task_id} · skutočne vrátené task_id alebo záznam v knižnici médií

GET /v1/media/assets/{asset_id}/content

GET /v1/media/assets

GET /v1/media/assets/{asset_id}

Cenník

Tarifné údaje nepridávajú možnosti požiadavky. Podporované parametre sú uvedené pri vybranej metóde.

Rýchly režim: Neuvedené Keď je zvolený rýchly režim
Režim Flex: Neuvedené Keď je zvolený režim flex
Maximálna úroveň uvažovania: Neuvedené Keď sa pri maximálnej úrovni uvažovania používa predvolená úprava (default)

Sadzby Ailoot

Ceny podľa konfigurácie

Každý poplatok priraďte k zobrazeným podmienkam. Pre každú skupinu alternatívnych konfigurácií použite jednu sadzbu.

Konfigurácia	Sadzobník	Účtovacia jednotka	Poplatok
KonfiguráciaZákladné sadzby za tokeny	SadzobníkZákladná sadzba	Účtovacia jednotka—	Poplatok Vstup · Vstupné tokeny — / 1K tokenov Výstup · Výstupné tokeny — / 1K tokenov Vstup · Čítanie cache — / 1K tokenov Vstup · Zápis do cache — / 1K tokenov Vstup · Zápis do cache, 1 hod — / 1K tokenov
Konfiguráciavstupný bajt UTF-8	Sadzobník—	Účtovacia jednotkaza vstupný bajt UTF-8	Poplatok Vstup · vstupný bajt UTF-8 $0.00003 za vstupný bajt UTF-8

Ailoot pred požiadavkou rezervuje odhadovanú sumu. Po získaní výsledku vyúčtuje konečný poplatok podľa nameraného využitia. Pri streamovaní sa vyúčtovanie riadi konečným záznamom využitia. Ako funguje rezervácia a vyúčtovanie →

Príklady požiadaviek

Ailoot Ultra · Reč

Použite skutočné vstupné údaje a uchovajte úplný výsledok

set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_INPUT_TEXT:?Set the actual documented input value}"
export AILOOT_INPUT_TEXT
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
request={'model': 'fish-audio/s2.1-pro', 'input': '${ACTUAL_INPUT_TEXT}', 'voice': 'b347db033a6549378b48d00acb0d06cd', 'response_format': 'mp3'}
request['input']=os.environ['AILOOT_INPUT_TEXT']
Path('request.json').write_text(json.dumps(request,ensure_ascii=False),encoding='utf-8')
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/audio/speech \
  -H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
  --data-binary @request.json -D response-headers.txt -o response.bin
# Retain the complete response and headers, every actual output, original returned identifiers and all usage fields. Recover the original operation without submitting creation again.

Prijať a uložiť výsledky

Ailoot Ultra · Reč

Úplný binárny zvuk alebo pôvodná odpoveď audio_url, hlavičky a každý súbor vo vašom vlastníctve.

GET /v1/media/tasks/{task_id}
GET /v1/media/assets/{asset_id}/content
GET /v1/media/assets
GET /v1/media/assets/{asset_id}

Čítanie ďalšieho obsahu

Čítať existujúce podklady, ktoré vám patria

set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/media/assets \
  -H "Authorization: Bearer $AILOOT_API_KEY" -o owned-assets.json
# Preserve every returned asset and follow its exact signed content URL. Do not construct a signed token.

Uchovať všetky dokončené výsledky

Uložte každú úplnú vrátenú odpoveď, súbor a časť obsahu.

Uchovajte úplnú odpoveď a hlavičky, všetky skutočné výstupy, pôvodné vrátené identifikátory a všetky polia s údajmi o spotrebe. Obnovte pôvodnú operáciu bez opätovného odoslania požiadavky na vytvorenie.

Ak treba overiť pôvodnú odpoveď

Uchovajte vrátené X-Client-Request-ID na zosúladenie záznamov. Čítajte iba skutočne vrátené hodnoty task_id/asset_id alebo vlastnú knižnicu médií; nikdy nevytvárajte URL úlohy z ID operácie a nikdy znova neodosielajte požiadavku na vytvorenie.

Aliasy

Aliasy modelov

Ailoot Ultra fish-audio/s2.1-pro

Aliasy ciest metód

Použite cesty metód uvedené vyššie.

Súvisiace ID na volanie

fish-audio/s2.1-pro

FAQ · Fish Audio: S2.1 Pro

Aké vstupy a výsledky sú dostupné?: POST /v1/audio/speech · fish-audio/s2.1-pro: text → audio
Aké polia používa požiadavka?: POST /v1/audio/speech · fish-audio/s2.1-pro: model, input, voice, response_format, provider

Fish Audio: S2.1 Pro