ByteDance Seed: Seed Audio 1.0
ByteDance Seed Audio 1.0 根據創作任務說明生成語音演出與聲音場景。它協調人聲、音效與環境音,支援以 100 ms 間隔控制對白時序,並涵蓋超過 20 種語言。製造商描述單次生成最長兩分鐘,且支援接續生成。
關於模型
此說明介紹模型的能力。Ailoot 可用的輸入、輸出與選項,依所選方法列於下方。
ByteDance Seed Audio 1.0 是以聲音場景為核心的音訊創作模型。透過文字任務說明,可一起塑造語音、音效及環境音。因此,它適用於有聲故事、遊戲遭遇、短篇戲劇對話,或搭配剪輯影片的場景。純人聲工作應描述說話者與演出;較完整的場景則應加上聲學環境,以及對白與周邊聲音的關係。
依聽眾應體驗場景的順序準備任務說明。指出角色、預期情緒狀態,以及需要說出的話。接著描述空間、重要聲音提示及當下情節的發展方式。製作說明應區分精確對白與場景描述,讓結果能同時與兩者核對。指出哪些元素對理解必不可少,哪些應留在背景。即使台詞相同,安靜房間、擁擠車站與開放庭院仍需要不同的聲音設計。
原創範例是遊戲角色在短暫避雨場景中安撫同伴:克制的聲音說「我們可以在這裡等」,搭配低音量雨聲環境音,並在台詞後出現一聲靠近的腳步。實用的聆聽檢查是字句是否清晰、人聲是否傳達安心,以及聲音提示是否在場景中合理的時點出現。另一項說明可以要求清楚的旁白介紹產品,不帶周邊氛圍音。這些是具體表達意圖的示例,並非生成音訊紀錄,也不是對完成混音的承諾。
製造商記載了提示層級的角色對白時序控制,以 100 ms 為間隔。使用這項控制描述台詞應在腳本序列中的何時進入,或規劃語音如何配合既有剪輯。將對白時序與音效、環境音的位置分開:發行說明將角色對白列為主要時序控制重點。依預定場景審閱實際開始時間、停頓及重疊。時序間隔描述模型的控制粒度,不能免除聆聽最終演出的必要。
聲音可透過文字描述、經授權的參考樣本,或兩者共同指定。製造商將其描述為無須為每位說話者訓練獨立模型的聲音塑造。將穩定的聲音特徵與當前台詞的情緒分開描述。重複出現的角色可能需要平靜介紹與急迫回應,同時維持辨識度。實務準備時,選擇能清楚聽見目標人聲的參考,並指出哪些特徵應帶入新演出。準備相關場景時,保持該參考與角色說明一致。
發行說明記載支援超過 20 種語言的生成,包括中文、英文、日文、韓文、西班牙文、印尼文、德文、法文、泰文及越南文。它描述了將可辨識角色聲音調整為不同語言節奏與表達的能力。提供最終語言的對白,請理解該語言的聆聽者審閱名稱、重音、停頓及情緒語氣。多語言版本應維持角色定位與情緒意圖穩定,同時給每份腳本足夠空間自然措辭。將翻譯作為腳本工作的一部分準備,避免假設聲音場景說明已涵蓋每項在地化決策。
根據製造商發行說明,Seed Audio 1.0 單次可生成最長兩分鐘,並支援接續生成。較長故事適合使用場景邊界與可重複使用的角色說明。每次接續時,除了連結各段的字句,也聆聽聲音、背景質感及步調是否改變。將傳回音訊視為供聆聽的素材:準備播放或匯入編輯器時檢查實際檔案資訊,並保留腳本與場景說明供修訂。串接的製作成果應作為連續場景檢查,不能只檢查個別片段。
製造商描述了統一架構,由語言層級的創作意圖引導基於擴散的聲學生成器。對任務說明的實際意義,是可將聲音與環境一起考量。聚焦於定義場景的少數關係:台詞是否突出、音效是否打斷台詞,以及氛圍如何支持當下情緒。加入許多不相關提示,會讓需要修訂的結果部分更難辨識。聲音提示搶過對白,或演出未呈現預期語氣時,調整該段的創作指示。
發行說明指出,長篇複雜資料中的聲音連續性,以及各聲音元素更細緻的時序,仍是發展領域。製作審閱應保持具體:精確字句、說話者身分、語言、進入時點、清晰度,以及各接續段落的一致性。此模型的實用輸出是可聽見的場景或語音演出。關於剪輯切點、字幕及交付格式的個別決策,可根據實際結果與目標製作需求決定。
Ailoot Ultra · 語音 POST /v1/audio/speech bytedance-seed/seed-audio-1-0
bytedance-seed/seed-audio-1-0入門
ByteDance Seed Audio 1.0 根據創作任務說明生成語音演出與聲音場景。它協調人聲、音效與環境音,支援以 100 ms 間隔控制對白時序,並涵蓋超過 20 種語言。製造商描述單次生成最長兩分鐘,且支援接續生成。
- 接受的輸入
- 文字
- 結果
- 音訊
Ailoot 可用 · 輸入與方法
Ailoot Ultra · 語音 POST /v1/audio/speech
- 輸入
text- 輸出
audio
| 欄位 | 類型 | 要求 | 值與限制 | 預設值 |
|---|---|---|---|---|
欄位model | 類型string | 要求必填 | 值與限制 bytedance-seed/seed-audio-1-0 | 預設值— |
欄位input | 類型string | 要求必填 | 值與限制 長度下限: 1 | 預設值— |
欄位voice | 類型string | 要求選填 | 值與限制 長度下限: 1 | 預設值— |
欄位response_format | 類型string | 要求選填 | 值與限制 mp3, pcm | 預設值pcm |
欄位provider | 類型object | 要求選填 | 值與限制 | 預設值— |
方法參數與生命週期
| 參數 | 規格 |
|---|---|
參數content_type | 規格application/json |
參數required | 規格model, input |
參數material_types | 規格text |
生命週期: synchronous_result_then_owned_library
GET /v1/media/tasks/{task_id} · 實際回傳的 task_id 或媒體庫紀錄
GET /v1/media/assets/{asset_id}/content
GET /v1/media/assets
GET /v1/media/assets/{asset_id}
方案
費率資訊不會增加請求選項。支援的參數列於所選方法中。
- 快速模式
- 未指定 選取快速模式時
- flex 模式
- 未指定 選取 flex 模式時
- 最高推理強度
- 未指定 最高推理強度採用 default 調整值時
Ailoot 費率
各設定的價格
請逐一核對各項費用與所列條件。每組互為替代選項的設定只套用一種費率。
| 設定 | 費率表 | 計費單位 | 費用 |
|---|---|---|---|
| 設定基礎 token 費率 | 費率表基本費率 | 計費單位— | 費用 輸入 · 輸入 Token — / 1K Token 輸出 · 輸出 Token — / 1K Token 輸入 · 讀取快取 — / 1K Token 輸入 · 寫入快取 — / 1K Token 輸入 · 寫入快取,1 小時 — / 1K Token |
| 設定輸出音訊秒數 | 費率表— | 計費單位每秒輸出音訊 | 費用 輸出 · 輸出音訊秒數 $0.005 每秒輸出音訊 |
Ailoot 會在請求前預留估算金額。取得結果後,依實測用量結算最終費用。串流結算採用最終用量紀錄。預留金額與結算的運作方式 →
請求範例
Ailoot Ultra · 語音
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_INPUT_TEXT:?Set the actual documented input value}"
export AILOOT_INPUT_TEXT
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
request={'model': 'bytedance-seed/seed-audio-1-0', 'input': '${ACTUAL_INPUT_TEXT}'}
request['input']=os.environ['AILOOT_INPUT_TEXT']
Path('request.json').write_text(json.dumps(request,ensure_ascii=False),encoding='utf-8')
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/audio/speech \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o response.bin
# Retain the complete response and headers, every actual output, original returned identifiers and all usage fields. Recover the original operation without submitting creation again.
接收並儲存結果
Ailoot Ultra · 語音
完整的二進位音訊或原始 audio_url 回應、標頭,以及每個自有資產。
GET /v1/media/tasks/{task_id}GET /v1/media/assets/{asset_id}/contentGET /v1/media/assetsGET /v1/media/assets/{asset_id}
其他內容讀取方式
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/media/assets \
-H "Authorization: Bearer $AILOOT_API_KEY" -o owned-assets.json
# Preserve every returned asset and follow its exact signed content URL. Do not construct a signed token.
保留所有已完成的結果
請保留所有完整傳回的回應、檔案與內容區塊。
保留完整回應與標頭、所有實際輸出、原始回傳的識別碼,以及所有用量欄位。恢復原始作業時,請勿再次提交建立請求。
需要檢查原始回應時
保留回傳的 X-Client-Request-ID,以供核對。僅讀取實際回傳的 task_id/asset_id 值或自己擁有的媒體庫;請勿以作業 ID 組成任務 URL,也請勿重新提交建立請求。
別名
模型別名
Ailoot Ultra bytedance-seed/seed-audio-1-0
方法路徑別名
請使用上方列出的 API 方法路徑。
相關呼叫用 ID
FAQ · ByteDance Seed: Seed Audio 1.0
- 可以使用哪些輸入與結果?
POST /v1/audio/speech·bytedance-seed/seed-audio-1-0:text→audio- 請求使用哪些欄位?
POST /v1/audio/speech·bytedance-seed/seed-audio-1-0:model,input,voice,response_format,provider