Fish Audio: Transcribe 1 Pro
Transcribe 1 Pro omdanner optagelser på op til 60 minutter til tekst med talermarkører og valgfri tidsangivelse for hvert ord. Den bevarer udledte følelses- og stemmehændelsesmarkeringer, så interviews, møder og podcasts lettere kan gennemgås, gennemsøges eller klargøres til undertekster.
Om modellen
Denne beskrivelse dækker modellens funktioner. Tilgængelige input, output og indstillinger i Ailoot står nedenfor for den valgte metode.
Transcribe 1 Pro er Fish Audios tale-til-tekst-model til korte klip, samtaler med flere talere og lange optagelser. Den modtager optaget lyd og returnerer en transskription med valgfrie tidsangivelser og strukturerede taleture. Dens særlige egenskaber er markering af talerskift i teksten og oplysninger om følelser eller stemmehændelser, der bevarer mere af optagelsens samtalestruktur end en ren række ord.
Til et interview, møde eller en podcast bevares hele samtalen i én fil, så tilbagevendende talere kan beholde ensartede betegnelser i svaret. Et nyttigt materiale til gennemgang er en transskription knyttet til originaloptagelsen med taleturene vist separat og et tidsstempel til kontrol af et citat. Et resumé eller en handlingsliste er et efterfølgende trin i applikationen: hold det adskilt fra transskriptionen, så den talte kilde stadig kan bruges til sammenligning.
Producenten accepterer optagelser på op til 60 minutter og beskriver behandling af lange filer med komprimeret lyd som MP3, Opus eller AAC. Understøttede formater omfatter WAV, MP3, AAC i M4A eller MP4, FLAC, Ogg med Opus eller Vorbis, WebM/Matroska og MOV. Til en videofil bruges det første lydspor. AIFF, CAF, WMA, AMR, AC-3 og rå PCM uden header understøttes ikke. Der leveres én lydfil pr. forespørgsel; resultatet kommer, når hele optagelsen er transskriberet, og en lang optagelse kan tage flere minutter. Klip kortere end cirka 0,08 sekunder afvises.
Producentens svar indeholder den fulde tekst, optagelsens varighed i sekunder og et segments-array. Pro markerer talerskift direkte i teksten med betegnelser som <|speaker:0|> og <|speaker:1|>; en betegnelse gælder for den efterfølgende tekst indtil næste markør. Det er identifikatorer inden for ét svar, ikke verificerede navne eller identiteter, der kan matches på tværs af forespørgsler. Hvis transskriptionen ikke har nogen talermarkør, behandler vejledningen den som et resultat med én taler. Bevar eventuel tekst før den første markør sammen med den første taletur frem for at kassere den.
Tidsstempler på ordniveau er valgfrie. I producentens forespørgsel har ignore_timestamps standardværdien true; værdien false anmoder om segmenter med tekst samt start- og sluttider i sekunder. Et segment er normalt et ord eller ét eller nogle få tegn på kinesisk og japansk. Segmentteksten udelader tegnsætning, talermarkører og hændelsesmarkeringer og kan normalisere en udtalt værdi anderledes end den fulde transskription. Et ordsegment kan have samme start- og sluttid. Et tomt segments-array kan betyde, at tidsstempler ikke blev anmodet om, at der ikke blev fundet tale, eller at tidsangivelser midlertidigt ikke var tilgængelige. Brug den fulde transskription til læsbar ordlyd og segmenter til tidsmæssig tilpasning frem for at antage, at begge tekststrenge er identiske tegn for tegn.
Indstillingen diarize har standardværdien auto. Når der anmodes om tidsstempler, og diarize ikke er false, returnerer Pro også speaker_turns. Hver taletur indeholder sin talerbetegnelse, tekst og start-/sluttider og bevarer tegnsætning og de medtagne markeringer uden talermarkøren fra den fulde tekst. Hvis tidsangivelser på ordniveau ikke er tilgængelige, kan taleturstiderne være omtrentlige og dække hele optagelsen; tilstødende taleture er ikke nødvendigvis sammenhængende eller uden overlap. Deaktivering af diarize fjerner den strukturerede liste over taleture, men lader talermarkørerne blive i den fulde tekst. Et kendt talerantal eller et minimums- og maksimumsantal kan efter bedste evne hjælpe med taleradskillelse i længere optagelser. Det præcise antal kan ikke kombineres med antalsgrænserne, og antalsoplysninger kan ikke bruges, når diarize er deaktiveret.
Følelses- og stemmehændelsesmarkeringer vises som tekst i firkantede parenteser, eksempelvis [laughter], sammen med den genkendte tale. De er udledt af lyden, ikke ord, som en bruger skal tilføje før transskription. Pros indstilling tag_audio_events har standardværdien true; deaktivering fjerner disse markeringer fra transskriptionen og taletursteksten uden at ændre tidsangivelserne. Der findes intet separat følelsesfelt eller en fast opregning af følelseskategorier. Bevar den annoterede transskription, når måden en bemærkning lyder på er vigtig, og brug en version uden markeringer, når det efterfølgende resultat kun kræver de talte ord.
Sproget registreres automatisk. Et valgfrit ISO 639-1-hint med små bogstaver gennemtvinger ikke oversættelse og ændrer ikke Pros transskription. Hvis sproget ikke kan bestemmes, kan den returnerede sprogkode afspejle hintet uden at være verificeret mod lyden. Producenten rapporterer ét sprog frem for en oversigt over alle sprog i en flersproget optagelse. Bevar den oprindelige ordlyd og sprogmetadata sammen, når et søgbart arkiv klargøres, især når forskellige dele af en samtale skifter sprog.
Til undertekster grupperes på hinanden følgende ord med tidsangivelser i læsbare SRT- eller WebVTT-undertekstblokke frem for at lave én undertekst pr. ord. Adskil blokkene ved pauser, og vælg længde og visningstid, der passer til afspilleren og publikum. Grænser mellem taleture kan holde forskellige talere i separate undertekstblokke. Kontroller, om tidsresultatet er tomt, og at hver undertekstbloks sluttid ligger efter dens starttid. Undertekstformatering, navne til anonyme talerbetegnelser og eventuelle senere resuméer er applikationsresultater, der bygges ud fra transskriptionsresultatet.
Til et praktisk optagelsesforløb afgøres det før transskription, om der er brug for en almindelig læsbar transskription, annoterede samtaleture eller tidsstyrede undertekster. Bevar lydidentifikatoren sammen med resultatet, behold den returnerede fulde tekst, når tegnsætning og markeringer er vigtige, og brug de strukturerede tidsfelter til navigation. Pros funktioner til lange optagelser og flere talere er adskilt fra den generelle Transcribe 1-model til korte optagelser; deres grænser og indstillinger må ikke behandles som udskiftelige.
Ailoot Ultra · Talegenkendelse POST /v1/audio/transcriptions fish-audio/transcribe-1-pro
fish-audio/transcribe-1-proStart
Transcribe 1 Pro omdanner optagelser på op til 60 minutter til tekst med talermarkører og valgfri tidsangivelse for hvert ord. Den bevarer udledte følelses- og stemmehændelsesmarkeringer, så interviews, møder og podcasts lettere kan gennemgås, gennemsøges eller klargøres til undertekster.
- Accepterede input
- Lyd
- Resultater
- Tekst
Tilgængelig i Ailoot · input og metoder
Ailoot Ultra · Talegenkendelse POST /v1/audio/transcriptions
- Inputtyper
audio- Outputtyper
text- Outputformat
- json
| Felt | Type | Krav | Værdier og grænser | Standard |
|---|---|---|---|---|
Feltmodel | Typestring | KravPåkrævet | Værdier og grænser fish-audio/transcribe-1-pro | Standard— |
Feltinput_audio | Typeobject | KravPåkrævet | Værdier og grænser Præcise nøgler: data, format | Standard— |
Feltinput_audio.data | Typebase64_string | KravPåkrævet | Værdier og grænser Maksimalt antal afkodede bytes: 26.214.400 Streng Base64: Ja | Standard— |
Feltinput_audio.format | Typestring | KravPåkrævet | Værdier og grænser Betingelser: Skal svare til det format, der faktisk er målt ved filanalysen | Standard— |
Feltresponse_format | Typestring | KravValgfrit | Værdier og grænser json | Standard— |
Kombinationer af inputmaterialer
speech_to_text · Påkrævet: input_audio.data, input_audio.format
Metodeparametre og livscyklus
| Parameter | Kontrakt |
|---|---|
Parametercontent_type | Kontraktapplication/json |
Parameterrequired | Kontraktmodel, input_audio |
Parameteradditional_properties | Kontraktfalse |
Parameterparameters | Kontrakt{"name":"model","type":"string","required":true,"enum":["fish-audio/transcribe-1-pro"]}, {"name":"input_audio","type":"object","required":true,"exact_keys":["data","format"],"data":"streng base64-kodning af faktiske understøttede lydbytes","format":"præcist format fra filanalysen; skal stemme overens med de faktiske bytes"}, {"name":"response_format","type":"string","required":false,"enum":["json"]} |
Parametermax_audio_bytes | Kontrakt26214400 |
Parametermultipart_for_this_profile | Kontraktfalse |
Parametermaterial_types | Kontraktaudio |
Livscyklus: synchronous_result_then_owned_library
GET /v1/media/tasks/{task_id} · det faktisk returnerede task_id eller posten i mediebiblioteket
GET /v1/media/assets/{asset_id}/content
GET /v1/media/assets
GET /v1/media/assets/{asset_id}
Behold hele svaret og de oprindeligt returnerede ID’er.
Indsend aldrig en oprettelse med ukendt udfald igen.
Priser
Tarifoplysninger tilføjer ikke anmodningsmuligheder. Understøttede parametre står ved den valgte metode.
- Hurtig tilstand
- Ikke angivet Når hurtig tilstand er valgt
- flex-tilstand
- Ikke angivet Når flex-tilstanden er valgt
- Maksimal ræsonneringsindsats
- Ikke angivet Når default-justeringen anvendes ved maksimal ræsonneringsindsats
Ailoot-takster
Priser efter konfiguration
Knyt hver omkostning til de viste betingelser. Brug én takst for hver gruppe af alternative konfigurationer.
| Konfiguration | Takstplan | Afregningsenhed | Beløb |
|---|---|---|---|
| KonfigurationGrundpriser for tokens | TakstplanGrundtakst | Afregningsenhed— | Beløb Input · Inputtokens — / 1K tokens Output · Outputtokens — / 1K tokens Input · Cachelæsning — / 1K tokens Input · Cacheskrivning — / 1K tokens Input · Cacheskrivning, 1 time — / 1K tokens |
| Konfigurationsekund inputlyd | Takstplan— | Afregningsenhedpr. sekund lydinput | Beløb Input · sekund inputlyd $0.0002 pr. sekund lydinput |
Ailoot reserverer et estimeret beløb før en anmodning. Efter resultatet afregnes det endelige beløb ud fra det målte forbrug. Ved streaming bruges den endelige forbrugsregistrering til afregningen. Sådan fungerer reservation og afregning →
Detaljer om referencetariffen
Referenceplaner på modelniveau ændrer ikke metodevalg, prisoverslag eller opkrævninger. Ved den aktive afregning anvendes taksterne for den valgte Ailoot-metode.
Fish Audio: Transcribe 1 Pro
Priser efter konfiguration
| Konfiguration | Afregningsbetingelser | Beløb |
|---|---|---|
| KonfigurationFish Audio: Transcribe 1 Pro · Standardkonfiguration | AfregningsbetingelserStandardkonfiguration | Beløb Input · Sekunder inputlyd 0,0002 US$ pr. sekund lydinput |
Eksempelanmodninger
Ailoot Ultra · Talegenkendelse
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_AUDIO_FILE:?Set your actual audio file}"
: "${AILOOT_AUDIO_FORMAT:?Set its actual probed file format}"
export AILOOT_AUDIO_FILE AILOOT_AUDIO_FORMAT
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
p=json.loads('{"model": "fish-audio/transcribe-1-pro", "response_format": "json"}')
import base64
f=Path(os.environ['AILOOT_AUDIO_FILE'])
raw=f.read_bytes()
if not raw or len(raw)>26214400:raise SystemExit('Use actual audio bytes within 25 MiB')
fmt=os.environ['AILOOT_AUDIO_FORMAT'].strip()
if not fmt:raise SystemExit('Use the actual probed format; the server checks it against the bytes')
p['input_audio']={'data':base64.b64encode(raw).decode(),'format':fmt}
Path('request.json').write_text(json.dumps(p,ensure_ascii=False))
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/audio/transcriptions \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o result.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
r=json.loads(Path('result.json').read_text())
print(json.dumps(r,ensure_ascii=False,indent=2))
print('Keep the complete JSON and response headers; do not resubmit an unknown creation.')
PY_RESULT
Hent og gem resultater
Ailoot Ultra · Talegenkendelse
json
GET /v1/media/tasks/{task_id}GET /v1/media/assets/{asset_id}/contentGET /v1/media/assetsGET /v1/media/assets/{asset_id}
Behold alle færdige resultater
Gem hvert fuldstændigt returneret svar, hver fil og hver indholdsdel.
Behold hele JSON-svaret, svarheadere, teksten og hvert faktisk returneret forbrugsfelt. Brug faktiske opgave- og aktividentiteter fra svaret eller dit ejede bibliotek; operation_id er ikke task_id.
Hvis det oprindelige svar skal kontrolleres
Gem det oprindelige operation_id/X-Client-Request-ID til afstemning uden genindsendelse; der er ingen særskilt rute til polling af lyd.
Svarfelter
| Felt | Type | Betydning |
|---|---|---|
Felttext | Typestring | BetydningTransskriberet tekst. |
Feltusage | Typeobject | BetydningLydforbrug. |
Feltusage.seconds | Typenumber | BetydningLydvarighed i sekunder. |
Feltduration | Typenumber | BetydningLydvarighed i sekunder. |
Felttask_id | Typestring | BetydningTransskriptionsopgavens ID; returneres med asset_url, når en ikke-tom transskription er gemt, offentliggjort og tildelt en signeret indholds-URL. |
Feltasset_url | Typestring | BetydningSigneret URL til transskriptionens indhold; returneres med task_id, når en ikke-tom transskription er gemt, offentliggjort og tildelt en signeret indholds-URL. |
Fejl og næste trin
| Svar | Betingelse | Næste trin |
|---|---|---|
Svar400 · invalid_request_error | BetingelseUgyldige obligatoriske felter, materialerepræsentation eller parameterværdi | Næste trinRet de angivne felter før en ny oprettelsesanmodning. |
Svarserver_error | BetingelseDet returnerede svar angiver, at operationen eller resultatet skal kontrolleres | Næste trinGem det oprindeligt returnerede operations-/opgave-ID, anmodningens headere og svaret; fortsæt med de understøttede læseanmodninger for den oprindelige operation. Send ikke oprettelsesanmodningen igen. |
Aliaser
Modelaliaser
Ailoot Ultra fish-audio/transcribe-1-pro
Aliaser for metodestier
Brug metodestierne vist ovenfor.
Relaterede kalder-ID’er
FAQ · Fish Audio: Transcribe 1 Pro
- Hvilke input og resultater er tilgængelige?
POST /v1/audio/transcriptions·fish-audio/transcribe-1-pro:audio→text- Hvilke felter bruger anmodningen?
POST /v1/audio/transcriptions·fish-audio/transcribe-1-pro:model,input_audio,response_format