HeyGen: Avatar IV
Avatar IV tạo chuyển động từ ảnh thành video nói khớp môi, với biểu cảm mặt và thời điểm cử chỉ được giọng nói hướng dẫn. HeyGen mô tả quy trình dùng kịch bản hoặc âm thanh ghi sẵn và điều khiển chuyển động Photo Avatar cho người dẫn chân thực hoặc cách điệu.
Về mô hình
Mô tả này trình bày khả năng của mô hình. Đầu vào, đầu ra và tùy chọn có trên Ailoot được liệt kê bên dưới cho phương thức đã chọn.
Avatar IV là bộ máy avatar của HeyGen để biến ảnh tĩnh thành video nói giàu biểu cảm. Thiết kế âm thanh thành biểu cảm lấy cảm hứng từ khuếch tán dùng sắc thái, nhịp và cảm xúc giọng để hướng dẫn chuyển động mặt, nghiêng đầu, khoảng dừng và vi biểu cảm. Mục đích là người dẫn hoặc nhân vật truyền đạt nội dung nói với khớp môi và cử chỉ, thay vì bộ tạo cảnh đa dụng tạo cả bối cảnh và bản âm thanh từ lời nhắc điện ảnh.
Nhà sản xuất mô tả hỗ trợ nhân vật chân thực và cách điệu, gồm ảnh nghiêng hoặc nhìn ngang, mặt phong cách anime và thú cưng. Nhân vật dựa trên ảnh hoạt động tốt nhất khi mắt, miệng và cấu trúc mặt dễ xác định. HeyGen khuyến nghị ảnh rõ, đủ sáng với tư thế tự nhiên và tay nhìn thấy khi cử chỉ quan trọng. Mặt rất nhỏ, môi bị che, mặt nạ dày, mỏ rõ hoặc tỷ lệ phóng đại mạnh có thể làm yếu chuyển động mặt và khớp môi. Giữ bố cục nguồn phù hợp diễn xuất dự kiến.
Nhà sản xuất cung cấp hai quy trình đầu vào lời nói. Kịch bản viết đi cùng giọng đã chọn; rãnh âm thanh ghi trước cung cấp trực tiếp giọng và thời điểm. Dùng quy trình âm thanh ghi sẵn khi cách thể hiện đã xác lập, và quy trình kịch bản khi cần tổng hợp lời. Đây là các đầu vào thay thế trong giao diện được mô tả. Chuẩn bị câu chữ, tên riêng và phát âm cuối trước khi tạo chuyển động, lưu âm thanh hoặc kịch bản cùng video trả về để kiểm tra kết quả nói.
Cấu hình mô hình Avatar IV của HeyGen bao quát avatar studio, Digital Twins, Photo Avatars, ảnh trực tiếp và chủ thể tạo bằng lời nhắc. Photo Avatar tái sử dụng cung cấp chủ thể ổn định cho video sau, còn quy trình ảnh trực tiếp bắt đầu từ ảnh cung cấp. Cấu hình Photo Avatar cung cấp chỉ dẫn chuyển động văn bản tự do và lựa chọn biểu cảm high, medium hoặc low, mặc định low. Giữ diện mạo avatar và bộ máy đã chọn khi làm chuỗi để thay ảnh nguồn hoặc mô hình dựng không thành thay đổi người dẫn không được nhận ra.
Với chỉ đạo chuyển động, mô tả hành động cơ thể nhìn thấy và tính chất cảm xúc. “Gật nhẹ với nụ cười ấm áp” cho một cử chỉ và một biểu cảm; lời chào ngắn có thể dùng vẫy tay thân thiện. Nhà sản xuất khuyến nghị một cử chỉ chính, tùy chọn đi cùng biểu cảm mặt và không quá hai mệnh đề ngắn cho chuỗi. Avatar IV xử lý nhịp theo diễn xuất, nên hướng dẫn Studio không yêu cầu lịch cử chỉ từng giây. Câu chữ cụ thể, ngắn dễ kiểm tra hơn nhiều hành động cạnh tranh trong một lời nhắc.
Cấu hình âm thanh thành video của nhà sản xuất dựng đến ba mươi phút âm thanh cung cấp mỗi yêu cầu, và tài sản MP3 hoặc WAV tải lên giới hạn 32 MB. Với bài học hoặc bản ghi dài hơn, chia tư liệu ở ranh giới lời nói mạch lạc và giữ thứ tự gốc. Thời điểm lời nói video cuối cần theo âm thanh đã chọn thay vì ước lượng thời lượng đoạn không liên quan.
Thiết lập đầu ra nhà sản xuất được mô tả gồm 720p hoặc 1080p và hình dạng 16:9, 9:16, 4:5, 5:4 hoặc 1:1, với tùy chọn tự động theo tỷ lệ nguồn. Kiểu khớp cover có thể cắt chủ thể; contain giữ toàn chủ thể và có thể để nền xung quanh nhìn thấy. Quy trình âm thanh thành video trả MP4 mặc định. Với avatar video, đầu ra WebM trong suốt cần hỗ trợ tách nền, và nhà sản xuất xóa nền cho đầu ra đó thay vì kết hợp nền mới. Kiểm tra bố cục và tệp thực tế trước khi đặt người dẫn vào bố cục lớn hơn.
Phần mở đầu đào tạo có thể dùng ảnh người dẫn dễ nhìn, giải thích ngắn và một cử chỉ tiết chế ở chỉ dẫn chính. Video giải thích sản phẩm có thể giữ cùng diện mạo avatar trong khi đổi kịch bản cho từng tính năng. Nhà sản xuất còn mô tả tệp phụ đề tùy chọn và chữ gắn vào video; xem câu chữ và thời điểm cùng lời nói. Dựng là bất đồng bộ trong giao diện nhà sản xuất, nên phản hồi tạo và video hoàn tất là sản phẩm khác nhau. Giữ bản ghi hoàn thiện và trạng thái hoàn tất cùng kết quả tác vụ.
Avatar IV khác chuyển động dựa trên tham chiếu của Avatar V và điều khiển cài sẵn Studio riêng của nó. Mô hình còn khác tạo cảnh đa dụng HeyGen Video và hội thoại avatar trực tiếp tương tác. Xem chuyển động miệng được dựng, tay nhìn thấy, biểu cảm mặt, khoảng dừng và câu chữ theo tư liệu nguồn và sắc thái dự kiến. Ảnh, tư thế, ánh sáng và chỉ dẫn chuyển động ảnh hưởng kết quả; hoạt hình dựa trên ảnh cần được kiểm tra như diễn xuất được tạo, lưu đầu vào đã chọn cho sửa sau.
Ailoot Ultra · Tạo video POST /v1/videos heygen/avatar-iv
heygen/avatar-ivBắt đầu
Avatar IV tạo chuyển động từ ảnh thành video nói khớp môi, với biểu cảm mặt và thời điểm cử chỉ được giọng nói hướng dẫn. HeyGen mô tả quy trình dùng kịch bản hoặc âm thanh ghi sẵn và điều khiển chuyển động Photo Avatar cho người dẫn chân thực hoặc cách điệu.
- Đầu vào được chấp nhận
- Văn bản · Ảnh · Âm thanh · Video
- Kết quả
- Video
Có trên Ailoot · đầu vào & phương thức
Ailoot Ultra · Tạo video POST /v1/videos
- Đầu vào
text,image,audio,video- Đầu ra
video
| Trường | Loại | Yêu cầu | Giá trị & giới hạn | Mặc định |
|---|---|---|---|---|
Trườngmodel | Loạistring | Yêu cầuBắt buộc | Giá trị & giới hạn heygen/avatar-iv | Mặc định— |
Trườnginput_references | Loạiarray | Yêu cầuBắt buộc | Giá trị & giới hạn Số mục tối thiểu: 2 Số mục tối đa: 2 | Mặc định— |
Trườngprompt | Loạistring | Yêu cầuKhông bắt buộc | Giá trị & giới hạn | Mặc định— |
Tham số phương thức và vòng đời
| Tham số | Hợp đồng |
|---|---|
Tham sốcontent_type | Hợp đồngapplication/json |
Tham sốrequired | Hợp đồngmodel, input_references |
Tham sốmaterial_types | Hợp đồngtext, image, audio, video |
Tham sốmaterial_conditions | Hợp đồngDùng URL nội dung của tài sản đa phương tiện thực tế đã hoàn tất, thuộc quyền sở hữu cùng chữ ký được trả về: một nguồn video cho BFL, hoặc một nguồn ảnh và một nguồn âm thanh cho hình đại diện. Cần có bằng chứng về chủ sở hữu/kiểu/byte từ mã nguồn., Cung cấp đúng một ảnh PNG/JPEG và một tài sản âm thanh WAV/MP3. Âm thanh tối đa 32000000 byte, có thời lượng lớn hơn 0 và tối đa 1800 giây. |
Vòng đời: asynchronous_job_then_owned_outputs
GET /v1/videos/{request_id} · id hoặc polling_url thực tế được trả về
GET /v1/videos/{request_id}/content
Bảng giá
Cách tính phí cuối cùng
Các đơn giá hiển thị dùng để ước tính chi phí trước khi tạo. Khoản phí cuối cùng được tính dựa trên chi phí ghi nhận cho lượt tạo gốc. Thời lượng đầu ra đo được và số lượng dự kiến không phải là số lượng cuối cùng dùng để tính phí.
Thông tin biểu giá không bổ sung tùy chọn yêu cầu. Các tham số được hỗ trợ nằm trong phương thức đã chọn.
- Chế độ nhanh
- Chưa chỉ định Khi chọn chế độ nhanh
- Chế độ Flex
- Chưa chỉ định Khi chọn chế độ flex
- Mức độ suy luận tối đa
- Chưa chỉ định Khi áp dụng mức điều chỉnh mặc định (default) cho mức độ suy luận tối đa
Mức phí ước tính để so sánh
Giá theo cấu hình
Đối chiếu từng khoản phí với điều kiện hiển thị. Dùng một mức phí cho mỗi nhóm cấu hình thay thế.
| Cấu hình | Biểu mức phí | Số lượng dự báo | Đơn vị tính phí | Điều kiện tính phí | Phí |
|---|---|---|---|---|---|
| Cấu hìnhGiá cơ sở cho token | Biểu mức phíMức phí cơ bản | Số lượng dự báo— | Đơn vị tính phí— | Điều kiện tính phí— | Phí Đầu vào · Token đầu vào · Ước tính chỉ để so sánh — / 1K token Đầu ra · Token đầu ra · Ước tính chỉ để so sánh — / 1K token Đầu vào · Đọc bộ nhớ đệm · Ước tính chỉ để so sánh — / 1K token Đầu vào · Ghi bộ nhớ đệm · Ước tính chỉ để so sánh — / 1K token Đầu vào · Ghi bộ nhớ đệm, 1 giờ · Ước tính chỉ để so sánh — / 1K token |
| Cấu hìnhGiá video | Biểu mức phí— | Số lượng dự báo— | Đơn vị tính phímỗi giây video | Điều kiện tính phíKhông có điều kiện bổ sung nào được khai báo trong khóa định giá này. | Phí Đầu ra · Giá video · Ước tính chỉ để so sánh $0.1 mỗi giây video |
| Cấu hìnhChi phí tạo ước tính | Biểu mức phí— | Số lượng dự báoước tính cho một lần tạo | Đơn vị tính phí— | Điều kiện tính phí— | Phí Đầu ra · Chi phí tạo ước tính · Ước tính chỉ để so sánh $0.1 ước tính trước khi tạo Ước tính này không phải là khoản phí bổ sung hay mức giá cố định cho lượt tạo đã hoàn tất. |
Ailoot tạm giữ một khoản ước tính trước yêu cầu. Sau khi có kết quả, phí cuối cùng được quyết toán theo mức sử dụng đo được. Việc quyết toán khi truyền luồng dùng bản ghi mức sử dụng cuối cùng. Cách hoạt động của cơ chế tạm giữ và quyết toán →
Ví dụ yêu cầu
Ailoot Ultra · Tạo video
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_INPUT_REFERENCES_JSON:?Set the actual documented input value}"
export AILOOT_INPUT_REFERENCES_JSON
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
request={'model': 'heygen/avatar-iv', 'input_references': '${ACTUAL_OWNED_INPUT_REFERENCES}'}
request['input_references']=json.loads(os.environ['AILOOT_INPUT_REFERENCES_JSON'])
Path('request.json').write_text(json.dumps(request,ensure_ascii=False),encoding='utf-8')
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/videos \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o response.bin
# Retain the complete response and headers, every actual output, original returned identifiers and all usage fields. Recover the original operation without submitting creation again.
Nhận và lưu kết quả
Ailoot Ultra · Tạo video
GET /v1/videos/{request_id}GET /v1/videos/{request_id}/content
Lưu tất cả tài nguyên đã hoàn tất
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
: "${AILOOT_STATUS_FILE:?Set the actual completed status JSON file}"
export AILOOT_STATUS_FILE
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
from urllib.parse import urlsplit,urljoin
f=Path(os.environ["AILOOT_STATUS_FILE"])
if not f.is_file():raise SystemExit("Choose the actual completed status file")
r=json.loads(f.read_text())
if r.get("status")!="completed" or not isinstance(r.get("data"),list) or not r["data"]:raise SystemExit("Wait for a completed status with asset paths")
urls=[]
for x in r["data"]:
if not isinstance(x,str) or "\n" in x or "\r" in x:raise SystemExit("Invalid asset path")
u=urljoin("https://api.ailoot.ai",x)
z=urlsplit(u)
if z.scheme!="https" or z.netloc!="api.ailoot.ai" or z.username or z.password:raise SystemExit("Use the actual Ailoot asset paths from status")
urls.append(u)
Path("asset-urls.txt").write_text("\n".join(urls)+"\n")
PY_REQUEST
index=0
while IFS= read -r asset_url; do
curl --fail-with-body --silent --show-error "$asset_url" \
-H "Authorization: Bearer $AILOOT_API_KEY" -o "video-${index}.mp4"
index=$((index + 1))
done < asset-urls.txt
Lưu tất cả kết quả đã hoàn tất
Lưu mọi video đã hoàn tất hoặc tệp trả về; truy xuất từng URL tài nguyên thực tế được trả về.
Giữ lại toàn bộ phản hồi và các header, mọi đầu ra thực tế, các định danh gốc đã trả về và mọi trường usage. Khôi phục thao tác gốc mà không gửi lại yêu cầu tạo.
Nếu cần kiểm tra phản hồi gốc
Giữ lại X-Client-Request-ID, X-Ailoot-Task-Id và id/polling_url thực tế được trả về. Tiếp tục tác vụ ban đầu; không gửi lại yêu cầu tạo.
Trường phản hồi
| Trường | Loại |
|---|---|
Trườngid | Loại |
Trườngstatus | Loại |
Trườngdata[] | Loại |
Trườngoutputs[] | Loại |
Bí danh
Bí danh mô hình
Ailoot Ultra heygen/avatar-iv
Bí danh đường dẫn phương thức
Dùng các đường dẫn phương thức hiển thị ở trên.
ID gọi liên quan
FAQ · HeyGen: Avatar IV
- Có những đầu vào và kết quả nào?
POST /v1/videos·heygen/avatar-iv:text,image,audio,video→video- Yêu cầu sử dụng những trường nào?
POST /v1/videos·heygen/avatar-iv:model,input_references,prompt