Canopy Labs: Orpheus 3B
Model pertuturan bahasa Inggeris Orpheus 3B yang ditala halus oleh Canopy Labs menukar baris bertulis kepada audio ekspresif. Lapan suara pratetap dan tag bukan lisan menyokong narasi, dialog dan respons pertuturan aplikasi.
Tentang model
Huraian ini merangkumi keupayaan model. Input, output dan pilihan yang tersedia di Ailoot disenaraikan di bawah untuk kaedah yang dipilih.
Orpheus 3B 0.1 Fine-Tuned ialah model teks ke pertuturan bahasa Inggeris Canopy Labs untuk sintesis harian. Ia tergolong dalam keluarga Orpheus yang dibina berasaskan Llama 3B dan menumpukan intonasi, irama serta penyampaian ekspresif yang semula jadi. Inputnya ialah teks yang perlu dituturkan dengan penutur pilihan; outputnya ialah audio pertuturan. Pengeluar turut menyenaraikan pengklonan suara zero-shot untuk model talaan halus khusus ini. Contoh sintesis talaan halus yang diterbitkannya menggunakan penutur pratetap, manakala pemperomptan teks–pertuturan yang dikondisikan oleh rujukan didokumenkan secara berasingan untuk edisi pralatih. Edisi talaan halus ini berbeza daripada model pralatih dan model penyelidikan berbilang bahasa yang dikeluarkan secara berasingan.
Pilih penutur dan sediakan ayat
Pengeluar menyenaraikan lapan suara pratetap bahasa Inggeris: tara, leah, jess, leo, dan, mia, zac dan zoe. Konvensyen promptnya meletakkan nama penutur sebelum teks pertuturan, dipisahkan oleh titik bertindih. Aliran kerja penjanaan pertuturan rujukan boleh menambahkan pemformatan itu apabila suara diberikan secara berasingan. Pilih penutur untuk karya yang dimaksudkan dan kekalkan pilihan itu merentas petikan yang saling berkaitan.
Untuk penerangan ringkas, tulis narasi akhir dan bukannya arahan yang meminta model mereka penerangan. Ayat pertuturan yang berguna ialah: “Pilih folder yang anda mahu kongsi, semak siapa yang boleh membukanya, dan simpan perubahan.” Untuk dialog, sediakan ayat setiap penutur dengan jelas dan kekalkan tanda baca yang membantu penyampaian. Singkatan, tarikh atau nama produk patut ditulis dalam bentuk yang anda mahu pendengar dengar, terutama apabila bentuk ringkas bertulisnya boleh mengelirukan.
Petunjuk ekspresif dan bukan lisan
Orpheus mendokumenkan tag <laugh>, <chuckle>, <sigh>, <cough>, <sniffle>, <groan>, <yawn> dan <gasp>. Tag tersebut memberikan peristiwa bukan lisan yang jelas pada titik yang berkaitan dalam teks. Petikan perbualan ringkas boleh meletakkan ketawa kecil sebelum komen santai atau keluhan sebelum ayat yang bersifat renungan. Gunakan petunjuk pada tempat yang sesuai dalam persembahan dan pastikan perkataan sebenar ayat itu jelas.
Ini ialah petunjuk penjanaan pertuturan, bukannya bahasa arahan umum untuk menyunting rakaman sedia ada. Untuk suara latar, mulakan dengan teks yang mudah dibaca dan tambahkan hanya peristiwa ekspresif yang diperlukan oleh adegan. Dengar keseluruhan ayat untuk menilai sama ada peristiwa, penekanan dan rentak menyokong makna. Tugas narasi mungkin memerlukan suara yang stabil, manakala ayat watak boleh mendapat manfaat daripada petunjuk bukan lisan tertentu.
Penstriman dan hasil audio
Pengeluar menyediakan notebook tanpa penstriman serta contoh pertuturan penstriman. Penstriman mengembalikan cebisan audio berturutan semasa petikan dijana. Dalam contoh yang diterbitkan, cebisan itu ditulis ke dalam fail WAV mono pada 24,000 Hz dengan sampel 16 bit. Tetapan fail tersebut menerangkan aliran kerja rujukan; hasil yang berguna ialah rakaman yang boleh dimainkan dan perkataan, penutur serta penyampaiannya boleh diperiksa berbanding skrip.
Untuk narasi yang lebih panjang, sediakan petikan yang koheren dengan sempadan ayat yang jelas dan simpan salinan skrip akhir di sisi audio. Semak permulaan dan penghujung setiap petikan, sebutan nama penting dan peralihan antara rakaman yang bersebelahan. Panduan pensampelan pengeluar menetapkan penalti pengulangan sekurang-kurangnya 1.1 untuk penjanaan stabil dalam pelaksanaan rujukannya dan menyatakan bahawa pilihan pensampelan boleh mempengaruhi kelajuan pertuturan. Panjang model yang dikonfigurasikan dalam contoh ialah tetapan inferens, bukannya tempoh maksimum narasi yang telah ditetapkan.
Batas antara edisi
Profil ini berkaitan dengan model bahasa Inggeris yang ditala halus dengan penutur pratetapnya yang didokumenkan. Model pralatih mempunyai aliran kerja pengkondisian teks dan pertuturannya sendiri; keluaran berbilang bahasa mempunyai penutur dan tag khusus bahasa. Memilih edisi bahasa Inggeris ini tidak menggabungkan profil yang berasingan tersebut. Hasil praktikal ialah skrip pertuturan, suara pratetap yang dipilih dengan tujuan jelas dan audio yang telah disemak dari segi perkataan serta persembahan yang diperlukan oleh karya itu.
Ailoot Ultra · Penjanaan suara POST /v1/audio/speech canopylabs/orpheus-3b-0.1-ft
canopylabs/orpheus-3b-0.1-ftPengenalan
Model pertuturan bahasa Inggeris Orpheus 3B yang ditala halus oleh Canopy Labs menukar baris bertulis kepada audio ekspresif. Lapan suara pratetap dan tag bukan lisan menyokong narasi, dialog dan respons pertuturan aplikasi.
- Input yang diterima
- Teks
- Hasil
- Audio
Tersedia di Ailoot · input & kaedah
Ailoot Ultra · Penjanaan suara POST /v1/audio/speech
- Input
text- Output
audio- Format output
- mp3
| Medan | Jenis | Keperluan | Nilai & had | Lalai |
|---|---|---|---|---|
Medanmodel | Jenisstring | KeperluanDiperlukan | Nilai & had canopylabs/orpheus-3b-0.1-ft | Lalai— |
Medaninput | Jenisstring | KeperluanDiperlukan | Nilai & had Panjang minimum: 1 Unit: aksara Unicode | Lalai— |
Medanvoice | Jenisstring | KeperluanDiperlukan | Nilai & had tara, leah, jess, leo, dan, mia, zac | Lalai— |
Medanresponse_format | Jenisstring | KeperluanDiperlukan | Nilai & had mp3 | Lalai— |
Gabungan bahan input
text_to_speech · Diperlukan: input
Parameter kaedah dan kitar hayat
| Parameter | Kontrak |
|---|---|
Parametercontent_type | Kontrakapplication/json |
Parameterrequired | Kontrakmodel, input, voice, response_format |
Parametervoice_ids | Kontraktara, leah, jess, leo, dan, mia, zac |
Parameterresponse_format | Kontrakmp3 |
Parametermax_input_characters | Kontraknull |
Parameterother_options | Kontrakfalse |
Parameterinput | Kontrakteks UTF-8 tepat; kiraan aksara Unicode tanpa penormalan |
Parametermaterial_types | Kontraktext |
Kitar hayat: synchronous_result_then_owned_library
GET /v1/media/tasks/{task_id} · task_id sebenar yang dikembalikan atau rekod pustaka media
GET /v1/media/assets/{asset_id}/content
GET /v1/media/assets
GET /v1/media/assets/{asset_id}
Pilih suara yang tepat daripada profil model ini.
Aksara input dan saat audio ialah ukuran penggunaan yang berbeza.
Pelan harga
Rujukan tarif tidak menambah pilihan permintaan. Parameter yang disokong disenaraikan untuk kaedah yang dipilih.
- Mod pantas
- Tidak dinyatakan Apabila mod pantas dipilih
- Mod flex
- Tidak dinyatakan Apabila mod flex dipilih
- Usaha penaakulan maksimum
- Tidak dinyatakan Apabila usaha penaakulan maksimum menggunakan pelarasan default
Kadar Ailoot
Harga mengikut konfigurasi
Padankan setiap caj dengan syarat yang dipaparkan. Gunakan satu kadar bagi setiap set konfigurasi alternatif.
| Konfigurasi | Jadual kadar | Kuantiti yang boleh dibilkan | Unit pengebilan | Caj |
|---|---|---|---|---|
| KonfigurasiKadar asas token | Jadual kadarKadar asas | Kuantiti yang boleh dibilkan— | Unit pengebilan— | Caj Input · Token input — / 1K token Output · Token output — / 1K token Input · Bacaan cache — / 1K token Input · Penulisan cache — / 1K token Input · Penulisan cache, 1 jam — / 1K token |
| KonfigurasiUltra | Jadual kadar— | Kuantiti yang boleh dibilkanSetiap titik kod Unicode dikira sebagai satu aksara, termasuk aksara Han. | Unit pengebilanbagi setiap 1K aksara masukan | Caj Input · aksara input $0.03 bagi setiap 1K aksara masukan |
Butiran tarif rujukan
Jadual rujukan peringkat model tidak mengubah pemilihan kaedah, sebut harga atau caj. Caj aktif menggunakan kadar kaedah Ailoot yang dipilih.
Canopy Labs: Orpheus 3B
Harga mengikut konfigurasi
| Konfigurasi | Syarat pengebilan | Caj |
|---|---|---|
| KonfigurasiCanopy Labs: Orpheus 3B · Konfigurasi lalai | Syarat pengebilanKonfigurasi lalai | Caj Input · Aksara input USD 0.000014 bagi setiap aksara masukan |
Ailoot merizabkan anggaran amaun sebelum permintaan. Selepas hasil diterima, caj akhir diselesaikan berdasarkan penggunaan terukur. Penyelesaian caj penstriman menggunakan rekod penggunaan akhir. Cara rizab dan penyelesaian caj berfungsi →
Contoh permintaan
Ailoot Ultra · Penjanaan suara
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_VOICE_ID:?Choose an accepted voice ID from this exact model profile}"
export AILOOT_VOICE_ID
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
p=json.loads('{"model": "canopylabs/orpheus-3b-0.1-ft", "input": "Good afternoon! This is a short voice take."}')
voice=os.environ["AILOOT_VOICE_ID"]
allowed=json.loads('["tara", "leah", "jess", "leo", "dan", "mia", "zac"]')
if voice not in allowed: raise SystemExit("Choose an accepted voice ID from this exact model profile")
p["voice"]=voice
p["response_format"]="mp3"
Path("request.json").write_text(json.dumps(p,ensure_ascii=False))
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/audio/speech \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o speech.mp3
Terima dan simpan hasil
Ailoot Ultra · Penjanaan suara
mp3
GET /v1/media/tasks/{task_id}GET /v1/media/assets/{asset_id}/contentGET /v1/media/assetsGET /v1/media/assets/{asset_id}
Pembacaan kandungan lain
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/media/assets \
-H "Authorization: Bearer $AILOOT_API_KEY" -o media-assets.json
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_MEDIA_TASK_ID:?Set the actual ID returned by the response or media-library metadata}"
export AILOOT_MEDIA_TASK_ID
resource_id=$(python3 -c 'import os,urllib.parse;print(urllib.parse.quote(os.environ["AILOOT_MEDIA_TASK_ID"],safe=""))')
curl --fail-with-body --silent --show-error "https://api.ailoot.ai/v1/media/tasks/$resource_id" \
-H "Authorization: Bearer $AILOOT_API_KEY" -o media-task.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
print(json.dumps(json.loads(Path("media-task.json").read_text())))
PY_RESULT
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_ASSET_ID:?Set the actual ID returned by the response or media-library metadata}"
export AILOOT_ASSET_ID
resource_id=$(python3 -c 'import os,urllib.parse;print(urllib.parse.quote(os.environ["AILOOT_ASSET_ID"],safe=""))')
curl --fail-with-body --silent --show-error "https://api.ailoot.ai/v1/media/assets/$resource_id" \
-H "Authorization: Bearer $AILOOT_API_KEY" -o media-asset.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
print(json.dumps(json.loads(Path("media-asset.json").read_text())))
PY_RESULT
Simpan semua hasil yang selesai
Simpan setiap respons lengkap, fail dan bahagian kandungan yang dikembalikan.
Simpan hasil binari dan pengepala yang lengkap. Jika JSON atau berbilang output dikembalikan, simpan setiap item data dan dapatkan setiap URL aset bertandatangan yang sebenar.
Jika respons asal perlu disemak
Simpan operation_id/X-Client-Request-ID asal untuk penyelarasan rekod tanpa penghantaran semula; tiada laluan khusus untuk meninjau status audio.
Medan respons
| Medan | Jenis |
|---|---|
Medanbinary audio | Jenisbytes |
Medanresponse headers | Jenisheaders |
Ralat dan langkah seterusnya
| Respons | Syarat | Langkah seterusnya |
|---|---|---|
Respons400 · invalid_request_error | SyaratMedan wajib, perwakilan bahan atau nilai parameter tidak sah | Langkah seterusnyaBetulkan medan yang ditunjukkan sebelum permintaan penciptaan baharu. |
Responsserver_error | SyaratRespons yang dikembalikan menyatakan bahawa operasi atau hasil memerlukan semakan | Langkah seterusnyaSimpan ID operasi/tugas asal yang dikembalikan, pengepala permintaan dan respons; teruskan pembacaan yang disokong bagi operasi asal tersebut. Jangan hantar semula permintaan penciptaan. |
Alias
Alias model
Ailoot Ultra canopylabs/orpheus-3b-0.1-ft
Alias laluan kaedah
Gunakan laluan kaedah yang dipaparkan di atas.
ID pemanggil berkaitan
FAQ · Canopy Labs: Orpheus 3B
- Apakah input dan hasil yang tersedia?
POST /v1/audio/speech·canopylabs/orpheus-3b-0.1-ft:text→audio- Apakah medan yang digunakan oleh permintaan?
POST /v1/audio/speech·canopylabs/orpheus-3b-0.1-ft:model,input,voice,response_format