Nemotron 3.5 ASR Streaming Multilingual 0.6B is het spraakherkenningsmodel van NVIDIA met 600 miljoen parameters voor livetranscriptie en verwerking van opgenomen audio. Het breidt de Engelstalige streaminglijn uit met conditionering op taal-ID. Spraak wordt tekst in de invoertaal, met interpunctie en hoofdlettergebruik als onderdeel van de uitvoer.
De taaldekking van de maker heeft drie niveaus. Negentien localevarianten die direct geschikt zijn voor transcriptie omvatten Amerikaans en Brits Engels, Amerikaans en Europees Spaans, Frans uit Frankrijk en Canada, Italiaans, Braziliaans en Europees Portugees, Nederlands, Duits, Turks, Russisch, Arabisch, Hindi, Japans, Koreaans, Vietnamees en Oekraïens. Dertien localevarianten met brede dekking voegen Pools, Zweeds, Tsjechisch, Noors Bokmål, Deens, Bulgaars, Fins, Kroatisch, Slowaaks, Mandarijn, Hongaars, Roemeens en Estisch toe. Samen produceren deze 32 localevarianten transcripties zonder aanvullende fine-tuning.
Acht localevarianten die voor aanpassing zijn voorbereid — Grieks, Litouws, Lets, Maltees, Sloveens, Hebreeuws, Thai en Noors Nynorsk — worden door de tokenizer herkend, maar vereisen fine-tuning op data uit het toepassingsdomein om volledige transcriptie mogelijk te maken. Het cijfer van 40 localevarianten van de fabrikant betekent dus niet dat alle veertig standaard dezelfde mogelijkheden hebben. Een aangepast checkpoint is een afzonderlijk artefact ten opzichte van het basismodel.
De architectuur combineert een FastConformer-encoder met 24 lagen die rekening houdt met gecachte toestand, met een RNN-T-decoder. Zij bewaart de attention- en convolutietoestanden van de encoder uit eerdere frames en verwerkt elk nieuw audioblok zonder overlappende vensters herhaaldelijk opnieuw te berekenen. Naast de akoestische representatie wordt een taal-ID-signaal aangeleverd om de transcriptie te conditioneren of het model de taal te laten afleiden.
De NeMo-configuratie van NVIDIA documenteert blokgroottes van 80, 160, 320, 560 en 1120 milliseconden. De attention-instelling bepaalt hoeveel toekomstige audio een blok ontvangt voordat tekst wordt uitgevoerd, zodat een taak wachttijd en akoestische context tegen elkaar kan afwegen. Dit zijn streamingconfiguraties van de fabrikant, geen gegarandeerde responstijden voor het volledige traject; een implementatie kan een eigen ondersteunde subset aanbieden.
Bereid mono WAV-audio voor op de samplefrequentie van 16 kHz van de processor van de fabrikant. Gebruik de bijbehorende localeconditionering als de taal bekend is; de automatische modus detecteert de gesproken taal. Het basisvoorbeeld van de pipeline gebruikt standaard een prompt voor Amerikaans Engels, dus configureer meertalig gedrag bewust in plaats van het uit dat voorbeeld af te leiden.
In de automatische modus kan de workflow van de fabrikant een taaltag toevoegen na het afsluitende leesteken van de transcriptie. Door de tag te behouden blijft de taal beschikbaar voor een applicatie die verkeer in meerdere talen verwerkt; verwijderen ervan levert schone transcriptietekst op. Behoud het onderscheid tussen de herkende woorden, hun interpunctie en deze taalmetadata wanneer je het resultaat weergeeft of verwerkt.
Een ondertitelingsapplicatie kan audio op volgorde aanleveren, de transcriptie verzamelen en voltooide tekst gebruiken voor weergave of verdere verwerking. Een spraakapplicatie kan herkende spraak doorgeven aan de fase voor taalbegrip. Bij gespreksanalyse kunnen de oorspronkelijke opname en transcriptie samen worden bewaard, zodat namen, getallen en onbekende termen controleerbaar blijven. Het ASR-model levert de transcriptie; samenvatten, acties uitvoeren en spraak genereren zijn afzonderlijke applicatiefasen.
NVIDIA traint het model op een combinatie van openbare en bedrijfseigen spraakdata met menselijke en synthetische labels, genormaliseerd naar tekst met interpunctie en correct hoofdlettergebruik. De aanpassingshandleiding benadrukt dat taallabels en tekststijl op elkaar moeten aansluiten en dat vervolgens afzonderlijk gehouden evaluatieaudio moet worden beoordeeld met de streaminginstelling die voor gebruik is bedoeld. Zij beschrijft aanpassing aan taal, accent en domein, zonder die aangepaste resultaten als eigenschappen van het oorspronkelijke checkpoint te presenteren.
De modelkaart koppelt de praktische opnamelengte aan het beschikbare geheugen, in plaats van één universele maximale duur te publiceren. Houd de meertalige editie gescheiden van het uitsluitend Engelstalige model en bewaar de gekozen taal- en streamingconfiguratie bij het transcriptieresultaat. Het uitvoerartefact is de herkende tekst, met optionele taalmetadata van de fabrikant, in plaats van een algemeen gespreksantwoord.
", "aboutText": "Nemotron 3.5 ASR Streaming Multilingual 0.6B is het spraakherkenningsmodel van NVIDIA met 600 miljoen parameters voor livetranscriptie en verwerking van opgenomen audio. Het breidt de Engelstalige streaminglijn uit met conditionering op taal-ID. Spraak wordt tekst in de invoertaal, met interpunctie en hoofdlettergebruik als onderdeel van de uitvoer.\n\nDe taaldekking van de maker heeft drie niveaus. Negentien localevarianten die direct geschikt zijn voor transcriptie omvatten Amerikaans en Brits Engels, Amerikaans en Europees Spaans, Frans uit Frankrijk en Canada, Italiaans, Braziliaans en Europees Portugees, Nederlands, Duits, Turks, Russisch, Arabisch, Hindi, Japans, Koreaans, Vietnamees en Oekraïens. Dertien localevarianten met brede dekking voegen Pools, Zweeds, Tsjechisch, Noors Bokmål, Deens, Bulgaars, Fins, Kroatisch, Slowaaks, Mandarijn, Hongaars, Roemeens en Estisch toe. Samen produceren deze 32 localevarianten transcripties zonder aanvullende fine-tuning.\n\nAcht localevarianten die voor aanpassing zijn voorbereid — Grieks, Litouws, Lets, Maltees, Sloveens, Hebreeuws, Thai en Noors Nynorsk — worden door de tokenizer herkend, maar vereisen fine-tuning op data uit het toepassingsdomein om volledige transcriptie mogelijk te maken. Het cijfer van 40 localevarianten van de fabrikant betekent dus niet dat alle veertig standaard dezelfde mogelijkheden hebben. Een aangepast checkpoint is een afzonderlijk artefact ten opzichte van het basismodel.\n\nDe architectuur combineert een FastConformer-encoder met 24 lagen die rekening houdt met gecachte toestand, met een RNN-T-decoder. Zij bewaart de attention- en convolutietoestanden van de encoder uit eerdere frames en verwerkt elk nieuw audioblok zonder overlappende vensters herhaaldelijk opnieuw te berekenen. Naast de akoestische representatie wordt een taal-ID-signaal aangeleverd om de transcriptie te conditioneren of het model de taal te laten afleiden.\n\nDe NeMo-configuratie van NVIDIA documenteert blokgroottes van 80, 160, 320, 560 en 1120 milliseconden. De attention-instelling bepaalt hoeveel toekomstige audio een blok ontvangt voordat tekst wordt uitgevoerd, zodat een taak wachttijd en akoestische context tegen elkaar kan afwegen. Dit zijn streamingconfiguraties van de fabrikant, geen gegarandeerde responstijden voor het volledige traject; een implementatie kan een eigen ondersteunde subset aanbieden.\n\nBereid mono WAV-audio voor op de samplefrequentie van 16 kHz van de processor van de fabrikant. Gebruik de bijbehorende localeconditionering als de taal bekend is; de automatische modus detecteert de gesproken taal. Het basisvoorbeeld van de pipeline gebruikt standaard een prompt voor Amerikaans Engels, dus configureer meertalig gedrag bewust in plaats van het uit dat voorbeeld af te leiden.\n\nIn de automatische modus kan de workflow van de fabrikant een taaltag toevoegen na het afsluitende leesteken van de transcriptie. Door de tag te behouden blijft de taal beschikbaar voor een applicatie die verkeer in meerdere talen verwerkt; verwijderen ervan levert schone transcriptietekst op. Behoud het onderscheid tussen de herkende woorden, hun interpunctie en deze taalmetadata wanneer je het resultaat weergeeft of verwerkt.\n\nEen ondertitelingsapplicatie kan audio op volgorde aanleveren, de transcriptie verzamelen en voltooide tekst gebruiken voor weergave of verdere verwerking. Een spraakapplicatie kan herkende spraak doorgeven aan de fase voor taalbegrip. Bij gespreksanalyse kunnen de oorspronkelijke opname en transcriptie samen worden bewaard, zodat namen, getallen en onbekende termen controleerbaar blijven. Het ASR-model levert de transcriptie; samenvatten, acties uitvoeren en spraak genereren zijn afzonderlijke applicatiefasen.\n\nNVIDIA traint het model op een combinatie van openbare en bedrijfseigen spraakdata met menselijke en synthetische labels, genormaliseerd naar tekst met interpunctie en correct hoofdlettergebruik. De aanpassingshandleiding benadrukt dat taallabels en tekststijl op elkaar moeten aansluiten en dat vervolgens afzonderlijk gehouden evaluatieaudio moet worden beoordeeld met de streaminginstelling die voor gebruik is bedoeld. Zij beschrijft aanpassing aan taal, accent en domein, zonder die aangepaste resultaten als eigenschappen van het oorspronkelijke checkpoint te presenteren.\n\nDe modelkaart koppelt de praktische opnamelengte aan het beschikbare geheugen, in plaats van één universele maximale duur te publiceren. Houd de meertalige editie gescheiden van het uitsluitend Engelstalige model en bewaar de gekozen taal- en streamingconfiguratie bij het transcriptieresultaat. Het uitvoerartefact is de herkende tekst, met optionele taalmetadata van de fabrikant, in plaats van een algemeen gespreksantwoord.", "editorialOverlay": { "copy_fields": null, "copy_sha256": null, "copy_source": null, "html_sha256": "5bd7f4efcaf42cb551154d0cb4f124e891ecbeb278374aa148daaba3faacced1", "module_sha256": "ee9dc1c50b1e6a8fb7fa062030fcb4646b9aaaeb08be513b723a5a92a7290f06", "raw_model_unchanged": true, "schema": "ailoot-native-model-editorial-v1" }, "locale": "nl", "methods": [ { "html": "nvidia/nemotron-3.5-asr-streaming-multilingual-0.6bNemotron 3.5 ASR Streaming Multilingual 0.6B van NVIDIA transcribeert spraak naar tekst met interpunctie via een streamingencoder die rekening houdt met gecachte toestand. Het ondersteunt expliciete taalconditionering of automatische detectie, met 32 localevarianten die direct geschikt zijn voor transcriptie en acht die aanpassing vereisen.
Deze beschrijving gaat over de mogelijkheden van het model. De via Ailoot beschikbare invoer, uitvoer en opties staan hieronder voor de geselecteerde methode.
Nemotron 3.5 ASR Streaming Multilingual 0.6B is het spraakherkenningsmodel van NVIDIA met 600 miljoen parameters voor livetranscriptie en verwerking van opgenomen audio. Het breidt de Engelstalige streaminglijn uit met conditionering op taal-ID. Spraak wordt tekst in de invoertaal, met interpunctie en hoofdlettergebruik als onderdeel van de uitvoer.
De taaldekking van de maker heeft drie niveaus. Negentien localevarianten die direct geschikt zijn voor transcriptie omvatten Amerikaans en Brits Engels, Amerikaans en Europees Spaans, Frans uit Frankrijk en Canada, Italiaans, Braziliaans en Europees Portugees, Nederlands, Duits, Turks, Russisch, Arabisch, Hindi, Japans, Koreaans, Vietnamees en Oekraïens. Dertien localevarianten met brede dekking voegen Pools, Zweeds, Tsjechisch, Noors Bokmål, Deens, Bulgaars, Fins, Kroatisch, Slowaaks, Mandarijn, Hongaars, Roemeens en Estisch toe. Samen produceren deze 32 localevarianten transcripties zonder aanvullende fine-tuning.
Acht localevarianten die voor aanpassing zijn voorbereid — Grieks, Litouws, Lets, Maltees, Sloveens, Hebreeuws, Thai en Noors Nynorsk — worden door de tokenizer herkend, maar vereisen fine-tuning op data uit het toepassingsdomein om volledige transcriptie mogelijk te maken. Het cijfer van 40 localevarianten van de fabrikant betekent dus niet dat alle veertig standaard dezelfde mogelijkheden hebben. Een aangepast checkpoint is een afzonderlijk artefact ten opzichte van het basismodel.
De architectuur combineert een FastConformer-encoder met 24 lagen die rekening houdt met gecachte toestand, met een RNN-T-decoder. Zij bewaart de attention- en convolutietoestanden van de encoder uit eerdere frames en verwerkt elk nieuw audioblok zonder overlappende vensters herhaaldelijk opnieuw te berekenen. Naast de akoestische representatie wordt een taal-ID-signaal aangeleverd om de transcriptie te conditioneren of het model de taal te laten afleiden.
De NeMo-configuratie van NVIDIA documenteert blokgroottes van 80, 160, 320, 560 en 1120 milliseconden. De attention-instelling bepaalt hoeveel toekomstige audio een blok ontvangt voordat tekst wordt uitgevoerd, zodat een taak wachttijd en akoestische context tegen elkaar kan afwegen. Dit zijn streamingconfiguraties van de fabrikant, geen gegarandeerde responstijden voor het volledige traject; een implementatie kan een eigen ondersteunde subset aanbieden.
Bereid mono WAV-audio voor op de samplefrequentie van 16 kHz van de processor van de fabrikant. Gebruik de bijbehorende localeconditionering als de taal bekend is; de automatische modus detecteert de gesproken taal. Het basisvoorbeeld van de pipeline gebruikt standaard een prompt voor Amerikaans Engels, dus configureer meertalig gedrag bewust in plaats van het uit dat voorbeeld af te leiden.
In de automatische modus kan de workflow van de fabrikant een taaltag toevoegen na het afsluitende leesteken van de transcriptie. Door de tag te behouden blijft de taal beschikbaar voor een applicatie die verkeer in meerdere talen verwerkt; verwijderen ervan levert schone transcriptietekst op. Behoud het onderscheid tussen de herkende woorden, hun interpunctie en deze taalmetadata wanneer je het resultaat weergeeft of verwerkt.
Een ondertitelingsapplicatie kan audio op volgorde aanleveren, de transcriptie verzamelen en voltooide tekst gebruiken voor weergave of verdere verwerking. Een spraakapplicatie kan herkende spraak doorgeven aan de fase voor taalbegrip. Bij gespreksanalyse kunnen de oorspronkelijke opname en transcriptie samen worden bewaard, zodat namen, getallen en onbekende termen controleerbaar blijven. Het ASR-model levert de transcriptie; samenvatten, acties uitvoeren en spraak genereren zijn afzonderlijke applicatiefasen.
NVIDIA traint het model op een combinatie van openbare en bedrijfseigen spraakdata met menselijke en synthetische labels, genormaliseerd naar tekst met interpunctie en correct hoofdlettergebruik. De aanpassingshandleiding benadrukt dat taallabels en tekststijl op elkaar moeten aansluiten en dat vervolgens afzonderlijk gehouden evaluatieaudio moet worden beoordeeld met de streaminginstelling die voor gebruik is bedoeld. Zij beschrijft aanpassing aan taal, accent en domein, zonder die aangepaste resultaten als eigenschappen van het oorspronkelijke checkpoint te presenteren.
De modelkaart koppelt de praktische opnamelengte aan het beschikbare geheugen, in plaats van één universele maximale duur te publiceren. Houd de meertalige editie gescheiden van het uitsluitend Engelstalige model en bewaar de gekozen taal- en streamingconfiguratie bij het transcriptieresultaat. Het uitvoerartefact is de herkende tekst, met optionele taalmetadata van de fabrikant, in plaats van een algemeen gespreksantwoord.
POST /v1/audio/transcriptionsaudiotext| Veld | Type | Vereiste | Waarden en limieten | Standaard |
|---|---|---|---|---|
Veldmodel | Typestring | VereisteVereist | Waarden en limieten nvidia/nemotron-3.5-asr-streaming-multilingual-0.6b | Standaard— |
Veldinput_audio | Typeobject | VereisteVereist | Waarden en limieten | Standaard— |
Veldlanguage | Typestring | VereisteOptioneel | Waarden en limieten | Standaard— |
Veldtemperature | Typenumber | VereisteOptioneel | Waarden en limieten Minimum: 0 Maximum: 1 | Standaard— |
Veldresponse_format | Typestring | VereisteOptioneel | Waarden en limieten json, verbose_json | Standaardjson |
Veldtimestamp_granularities | Typearray | VereisteOptioneel | Waarden en limieten | Standaard— |
Veldprovider | Typeobject | VereisteOptioneel | Waarden en limieten | Standaard— |
| Parameter | Contract |
|---|---|
Parametercontent_type | Contractapplication/json |
Parameterrequired | Contractmodel, input_audio |
Parametermaterial_types | Contractaudio |
Parametermaterial_conditions | ContractLees een daadwerkelijk WAV-bestand en codeer de echte bytes voor de gedeclareerde JSON input_audio; voor deze exacte declaratie met uitsluitend JSON wordt geen multipart-route aangeboden. |
Levenscyclus: synchronous_result_then_owned_library
GET /v1/media/tasks/{task_id} · de daadwerkelijk geretourneerde task_id of het record in de mediabibliotheek
GET /v1/media/assets/{asset_id}/content
GET /v1/media/assets
GET /v1/media/assets/{asset_id}
De weergegeven tarieven geven een schatting van de kosten vóór de generatie. Het definitieve bedrag wordt berekend op basis van de kosten die voor de oorspronkelijke generatie zijn geregistreerd. De gemeten duur van de uitvoer en de geschatte hoeveelheden zijn niet de definitieve factureerbare hoeveelheid.
Tariefverwijzingen voegen geen verzoekopties toe. Ondersteunde parameters staan bij de geselecteerde methode.
Koppel elke kostenpost aan de getoonde voorwaarden. Gebruik één tarief voor elke groep alternatieve configuraties.
| Configuratie | Tariefstaffel | Verwachte hoeveelheid | Rekeneenheid | Kosten |
|---|---|---|---|---|
| ConfiguratieBasistarieven voor tokens | TariefstaffelBasistarief | Verwachte hoeveelheid— | Rekeneenheid— | Kosten Invoer · Invoertokens · Schatting uitsluitend ter vergelijking — / 1K tokens Uitvoer · Uitvoertokens · Schatting uitsluitend ter vergelijking — / 1K tokens Invoer · Cache lezen · Schatting uitsluitend ter vergelijking — / 1K tokens Invoer · Cache schrijven · Schatting uitsluitend ter vergelijking — / 1K tokens Invoer · Cache schrijven, 1 uur · Schatting uitsluitend ter vergelijking — / 1K tokens |
| Configuratieseconde audio-invoer | Tariefstaffel— | Verwachte hoeveelheid— | Rekeneenheidper seconde audio-invoer | Kosten Invoer · seconde audio-invoer · Schatting uitsluitend ter vergelijking $0.00000666 per seconde audio-invoer |
| ConfiguratieGeschatte generatiekosten | Tariefstaffel— | Verwachte hoeveelheidschatting voor één generatie | Rekeneenheid— | Kosten Uitvoer · Geschatte generatiekosten · Schatting uitsluitend ter vergelijking $0.00000666 schatting vóór generatie Deze schatting is geen extra bedrag of vast tarief voor de voltooide generatie. |
Ailoot reserveert vóór een verzoek een geschat bedrag. Na het resultaat worden de uiteindelijke kosten afgerekend op basis van het gemeten verbruik. Bij streaming gebeurt de afrekening op basis van de definitieve verbruiksregistratie. Zo werken reservering en afrekening →
set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\n: "${AILOOT_AUDIO_FILE:?Set the path to your actual WAV recording}"\npython3 - <<'PY_REQUEST'\nimport json,os\nfrom pathlib import Path\nimport base64\naudio=Path(os.environ['AILOOT_AUDIO_FILE']).read_bytes()\nif not (audio[:4]==b'RIFF' and audio[8:12]==b'WAVE'): raise SystemExit('Supply an actual WAV audio file')\nif len(audio)>26214400: raise SystemExit('Use a documented supported large-file flow')\nrequest={'model': 'nvidia/nemotron-3.5-asr-streaming-multilingual-0.6b', 'input_audio': {'data': '${BASE64_ACTUAL_WAV_BYTES}', 'format': 'wav'}}\nrequest['input_audio']['data']=base64.b64encode(audio).decode('ascii')\nPath('request.json').write_text(json.dumps(request,ensure_ascii=False),encoding='utf-8')\nPY_REQUEST\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/audio/transcriptions \\\n -H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \\\n --data-binary @request.json -D response-headers.txt -o response.bin\n# Keep the complete original response and headers. Read every returned segment, word and usage field.\n# Preserve actual operation/task/asset IDs; continue reads of the original result without resubmitting.\nGET /v1/media/tasks/{task_id}GET /v1/media/assets/{asset_id}/contentGET /v1/media/assetsGET /v1/media/assets/{asset_id}set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/media/assets \\\n -H "Authorization: Bearer $AILOOT_API_KEY" -o owned-assets.json\n# Preserve every returned asset and follow its exact signed content URL. Do not construct a signed token.\nBewaar elk volledig teruggegeven antwoord, bestand en inhoudsonderdeel.
Bewaar het volledige antwoord en de headers, alle daadwerkelijke uitvoer, de oorspronkelijk geretourneerde identificatoren en alle gebruiksvelden. Herstel de oorspronkelijke bewerking zonder de aanmaakaanvraag opnieuw in te dienen.
Bewaar de geretourneerde X-Client-Request-ID voor reconciliatie. Lees alleen daadwerkelijk geretourneerde task_id/asset_id-waarden of de eigen mediabibliotheek uit; bouw nooit een taak-URL op basis van de bewerkings-ID en dien de aanmaakaanvraag nooit opnieuw in.
| Veld | Type |
|---|---|
Veldtext | Type |
Veldusage | Type |
Veldsegments[] | Type |
Veldwords[] | Type |
Veldspeaker fields | Type |
Veldtimestamps | Type |
Ailoot Ultra nvidia/nemotron-3.5-asr-streaming-multilingual-0.6b
Gebruik de hierboven getoonde methodepaden.