UI-TARS-1.5-7B 是 ByteDance 發布的 7B 多模態 GUI 代理模型，著重一般電腦使用。它結合介面的視覺感知與操作前推理，以原生 UI-TARS 架構為基礎加入強化學習。官方使用流程的輸入為指令、螢幕截圖與操作歷史；輸出描述下一個介面操作，通常附有說明預定步驟的 Thought。周邊應用程式執行該操作，提供下一張截圖，讓任務繼續。
開發商將這個可下載的 7B 檢查點與較大的 UI-TARS-1.5 研究模型區分。7B 發行版未特別針對遊戲情境最佳化，因此不應將較大研究模型的展示與結果，視為此版本的同等能力。它的實務角色是操作可見應用程式控制項：瀏覽器導覽、辦公軟體、檔案管理及類似桌面工作流程。讀取截圖並選擇操作，與生成影片或取得未顯示的應用程式狀態不同。
官方儲存庫描述桌面與行動操作範本。桌面操作涵蓋點擊、雙擊、按右鍵、拖曳、鍵盤快捷鍵、輸入文字及捲動，也提供 wait 與 finished 操作，用於檢查變動中的畫面或結束任務。行動範本加入長按、開啟應用程式，以及返回主畫面或上一頁等操作。獨立的定位範本要求僅提供 Action、不含 Thought，適合輕量操作輸出任務。選擇執行環境實際理解的操作詞彙，避免將所有範本視為可互換。
實用的任務說明會指出目標，提供目前截圖與相關操作歷史，並定義完成狀態。例如，原創編輯任務說明可以要求模型找到具名設定，將其改為指定值，並在新狀態可見後停止。根據目前畫面要求下一步，避免要求長串推測步驟。明確保留指令與允許操作的限制；執行一步後，傳回結果畫面，讓後續推理使用觀察結果，而非假設發生了什麼。
座標處理是官方工作流程的重要部分。儲存庫將模型預測，與剖析操作並將目標映射至螢幕的後處理分開。座標指南示範將縮放圖片中的座標轉回原始圖片尺寸。保留原始截圖寬高，並使用精確操作範本及剖析器所採用的座標慣例。縮放圖片中看似合理的位置，若直接套用至未縮放畫面，可能指向不同控制項。因此，模型操作文字是待解讀的指令，而非已執行的滑鼠事件。
部署指南提供具體的單步範例，其結果包含 Thought 與 Action；儲存庫中的桌面應用程式則是獨立執行介面。指南設定的輸入長度及範例輸出額度，是部署設定，並非對每種整合的上下文或操作限制做通用主張。實際 GUI 工作應傳送清楚可讀的截圖，包含下一次決策所需的控制項與周邊脈絡。UI-TARS 可能誤認元素、不正確描述陌生介面，或選擇次佳操作，尤其在畫面模糊不明時；每次操作後檢查新截圖，可讓這些錯誤持續對應實際任務狀態。
", "aboutText": "UI-TARS-1.5-7B 是 ByteDance 發布的 7B 多模態 GUI 代理模型，著重一般電腦使用。它結合介面的視覺感知與操作前推理，以原生 UI-TARS 架構為基礎加入強化學習。官方使用流程的輸入為指令、螢幕截圖與操作歷史；輸出描述下一個介面操作，通常附有說明預定步驟的 Thought。周邊應用程式執行該操作，提供下一張截圖，讓任務繼續。\n\n開發商將這個可下載的 7B 檢查點與較大的 UI-TARS-1.5 研究模型區分。7B 發行版未特別針對遊戲情境最佳化，因此不應將較大研究模型的展示與結果，視為此版本的同等能力。它的實務角色是操作可見應用程式控制項：瀏覽器導覽、辦公軟體、檔案管理及類似桌面工作流程。讀取截圖並選擇操作，與生成影片或取得未顯示的應用程式狀態不同。\n\n官方儲存庫描述桌面與行動操作範本。桌面操作涵蓋點擊、雙擊、按右鍵、拖曳、鍵盤快捷鍵、輸入文字及捲動，也提供 wait 與 finished 操作，用於檢查變動中的畫面或結束任務。行動範本加入長按、開啟應用程式，以及返回主畫面或上一頁等操作。獨立的定位範本要求僅提供 Action、不含 Thought，適合輕量操作輸出任務。選擇執行環境實際理解的操作詞彙，避免將所有範本視為可互換。\n\n實用的任務說明會指出目標，提供目前截圖與相關操作歷史，並定義完成狀態。例如，原創編輯任務說明可以要求模型找到具名設定，將其改為指定值，並在新狀態可見後停止。根據目前畫面要求下一步，避免要求長串推測步驟。明確保留指令與允許操作的限制；執行一步後，傳回結果畫面，讓後續推理使用觀察結果，而非假設發生了什麼。\n\n座標處理是官方工作流程的重要部分。儲存庫將模型預測，與剖析操作並將目標映射至螢幕的後處理分開。座標指南示範將縮放圖片中的座標轉回原始圖片尺寸。保留原始截圖寬高，並使用精確操作範本及剖析器所採用的座標慣例。縮放圖片中看似合理的位置，若直接套用至未縮放畫面，可能指向不同控制項。因此，模型操作文字是待解讀的指令，而非已執行的滑鼠事件。\n\n部署指南提供具體的單步範例，其結果包含 Thought 與 Action；儲存庫中的桌面應用程式則是獨立執行介面。指南設定的輸入長度及範例輸出額度，是部署設定，並非對每種整合的上下文或操作限制做通用主張。實際 GUI 工作應傳送清楚可讀的截圖，包含下一次決策所需的控制項與周邊脈絡。UI-TARS 可能誤認元素、不正確描述陌生介面，或選擇次佳操作，尤其在畫面模糊不明時；每次操作後檢查新截圖，可讓這些錯誤持續對應實際任務狀態。", "editorialOverlay": { "copy_fields": { "practical_html": "英文技術範例
Choose a safe next interface step\n\nGoal: enable weekly email summaries. Text description of the current settings page: a checkbox labelled Weekly summary is unchecked; a Save button is below it. History: settings opened, no changes saved. Describe the next interface action and the state to verify afterward. Use labels rather than inventing screen coordinates.One proposed action, a brief reason and the resulting visible state an application should check.Check that the answer proposes checking Weekly summary before saving and does not claim that any click was executed.bytedance/ui-tars-1.5-7bUI-TARS-1.5-7B 是 ByteDance 用於電腦操作代理的開放多模態模型。它根據螢幕截圖與任務推理，接著產生供應用程式執行的下一個 GUI 操作；此 7B 發行版著重一般電腦使用，並非針對遊戲最佳化。
此說明介紹模型的能力。Ailoot 可用的輸入、輸出與選項，依所選方法列於下方。
UI-TARS-1.5-7B 是 ByteDance 發布的 7B 多模態 GUI 代理模型，著重一般電腦使用。它結合介面的視覺感知與操作前推理，以原生 UI-TARS 架構為基礎加入強化學習。官方使用流程的輸入為指令、螢幕截圖與操作歷史；輸出描述下一個介面操作，通常附有說明預定步驟的 Thought。周邊應用程式執行該操作，提供下一張截圖，讓任務繼續。
開發商將這個可下載的 7B 檢查點與較大的 UI-TARS-1.5 研究模型區分。7B 發行版未特別針對遊戲情境最佳化，因此不應將較大研究模型的展示與結果，視為此版本的同等能力。它的實務角色是操作可見應用程式控制項：瀏覽器導覽、辦公軟體、檔案管理及類似桌面工作流程。讀取截圖並選擇操作，與生成影片或取得未顯示的應用程式狀態不同。
官方儲存庫描述桌面與行動操作範本。桌面操作涵蓋點擊、雙擊、按右鍵、拖曳、鍵盤快捷鍵、輸入文字及捲動，也提供 wait 與 finished 操作，用於檢查變動中的畫面或結束任務。行動範本加入長按、開啟應用程式，以及返回主畫面或上一頁等操作。獨立的定位範本要求僅提供 Action、不含 Thought，適合輕量操作輸出任務。選擇執行環境實際理解的操作詞彙，避免將所有範本視為可互換。
實用的任務說明會指出目標，提供目前截圖與相關操作歷史，並定義完成狀態。例如，原創編輯任務說明可以要求模型找到具名設定，將其改為指定值，並在新狀態可見後停止。根據目前畫面要求下一步，避免要求長串推測步驟。明確保留指令與允許操作的限制；執行一步後，傳回結果畫面，讓後續推理使用觀察結果，而非假設發生了什麼。
座標處理是官方工作流程的重要部分。儲存庫將模型預測，與剖析操作並將目標映射至螢幕的後處理分開。座標指南示範將縮放圖片中的座標轉回原始圖片尺寸。保留原始截圖寬高，並使用精確操作範本及剖析器所採用的座標慣例。縮放圖片中看似合理的位置，若直接套用至未縮放畫面，可能指向不同控制項。因此，模型操作文字是待解讀的指令，而非已執行的滑鼠事件。
部署指南提供具體的單步範例，其結果包含 Thought 與 Action；儲存庫中的桌面應用程式則是獨立執行介面。指南設定的輸入長度及範例輸出額度，是部署設定，並非對每種整合的上下文或操作限制做通用主張。實際 GUI 工作應傳送清楚可讀的截圖，包含下一次決策所需的控制項與周邊脈絡。UI-TARS 可能誤認元素、不正確描述陌生介面，或選擇次佳操作，尤其在畫面模糊不明時；每次操作後檢查新截圖，可讓這些錯誤持續對應實際任務狀態。
POST /v1/chat/completionstexttext| 欄位 | 類型 | 要求 | 值與限制 | 預設值 |
|---|---|---|---|---|
欄位model | 類型string | 要求必填 | 值與限制 bytedance/ui-tars-1.5-7b | 預設值— |
欄位messages | 類型message[] | 要求必填 | 值與限制 項目數下限: 1 | 預設值— |
欄位messages[].role | 類型string | 要求必填 | 值與限制 範例：system, user, assistant, tool, function 條件: 這些角色由 原始碼中的相容型別明確表示；確切角色集合仍依模型而定。 依模型而定 | 預設值— |
欄位messages[].content | 類型string|content_part[]|null | 要求選填 | 值與限制 | 預設值— |
欄位messages[].tool_calls | 類型tool_call[] | 要求選填 | 值與限制 | 預設值— |
欄位messages[].tool_call_id | 類型string | 要求選填 | 值與限制 適用條件: role=tool；使用實際回傳的 ID | 預設值— |
欄位messages[].name | 類型string | 要求選填 | 值與限制 | 預設值— |
欄位messages[].reasoning_content | 類型string | 要求選填 | 值與限制 適用條件: 此模型使用推理內容時，將實際回傳的推理內容帶回後續請求 | 預設值— |
欄位messages[].reasoning_details | 類型object|array | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位max_tokens | 類型integer | 要求選填 | 值與限制 最小值: 1 依模型而定 | 預設值— |
欄位max_completion_tokens | 類型integer | 要求選填 | 值與限制 最小值: 1 依模型而定 | 預設值— |
欄位stream | 類型boolean | 要求選填 | 值與限制 | 預設值false |
欄位stream_options.include_usage | 類型boolean | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位temperature | 類型number | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位top_p | 類型number | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位stop | 類型string|string[] | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位tools | 類型function_tool[] | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位tools[].type | 類型string | 要求選填 | 值與限制 function 依模型而定 | 預設值— |
欄位tools[].function.name | 類型string | 要求必填 | 值與限制 適用條件: 已提供函式工具 | 預設值— |
欄位tools[].function.description | 類型string | 要求選填 | 值與限制 | 預設值— |
欄位tools[].function.parameters | 類型JSON_schema | 要求選填 | 值與限制 | 預設值— |
欄位tool_choice | 類型string|object | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位parallel_tool_calls | 類型boolean | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位response_format | 類型object | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位reasoning_effort | 類型string | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位reasoning | 類型object | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位service_tier | 類型string | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位instructions | 類型string | 要求選填 | 值與限制 相容性欄位 | 預設值— |
欄位functions | 類型function[] | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位function_call | 類型string|object | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位prompt_cache_options | 類型object | 要求選填 | 值與限制 依模型而定 | 預設值— |
欄位modalities | 類型string[] | 要求選填 | 值與限制 text | 預設值— |
欄位provider | 類型object | 要求選填 | 值與限制 條件: 此 Ultra 文字路由拒絕 provider.options | 預設值— |
欄位cache_control.ttl | 類型string | 要求選填 | 值與限制 條件: 實際提示詞快取位置拒絕 1h | 預設值— |
文字 · UTF8 文字
messages[].content
| 參數 | 規格 |
|---|---|
參數content_type | 規格application/json |
參數required | 規格model, messages |
參數material_types | 規格text |
參數messages | 規格具有 role/content 結構的訊息陣列 |
參數file_material | 規格實際 UTF-8 文件以原文文字插入；不推定檔案 ID |
參數optional_controls | 規格stream, temperature, top_p, stop, max_tokens, max_completion_tokens, reasoning, response_format, tools, tool_choice |
參數control_scope | 規格依模型而定；使用者函式工具與託管工具不同 |
參數output_modalities | 規格text |
參數hosted_operations | 規格false |
參數multimodal_input_binding | 規格null |
生命週期： synchronous_or_streamed
將確切模型 ID 與 messages 一併送出。
上下文長度不是輸出上限。
文字檔案可提供原文文字；圖片／音訊／檔案物件輸入需要精確綁定。
費率資訊不會增加請求選項。支援的參數列於所選方法中。
請逐一核對各項費用與所列條件。每組互為替代選項的設定只套用一種費率。
| 設定 | 費率表 | 上下文 Token 數大於 | 上下文 Token 數小於或等於 | 費用 |
|---|---|---|---|---|
| 設定詞元基本費率 | 費率表基本費率 | 上下文 Token 數大於— | 上下文 Token 數小於或等於無上限 | 費用 輸入 · 輸入 Token $0.0002 / 1K Token 輸出 · 輸出 Token $0.0004 / 1K Token 輸入 · 讀取快取 $0.0002 / 1K Token 輸入 · 寫入快取 — / 1K Token 輸入 · 寫入快取，1 小時 — / 1K Token |
| 設定請求長度級距 1 | 費率表— | 上下文 Token 數大於0 | 上下文 Token 數小於或等於無上限 | 費用 輸入 · 輸入 Token $0.0002 / 1K Token 輸出 · 輸出 Token $0.0004 / 1K Token 輸入 · 讀取快取 $0.0002 / 1K Token 輸入 · 寫入快取 — / 1K Token 輸入 · 寫入快取，1 小時 — / 1K Token |
Ailoot 會在請求前預留估算金額。取得結果後，依實測用量結算最終費用。串流結算採用最終用量紀錄。預留金額與結算的運作方式 →
set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\npython3 - <<'PY_REQUEST'\nimport json,os\nfrom pathlib import Path\np=json.loads('{"model": "bytedance/ui-tars-1.5-7b", "messages": [{"role": "user", "content": "Explain the difference between an observation and a hypothesis in three sentences."}]}')\n\nPath("request.json").write_text(json.dumps(p,ensure_ascii=False))\nPY_REQUEST\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/chat/completions \\\n -H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \\\n --data-binary @request.json -D response-headers.txt -o result.json\npython3 - <<'PY_RESULT'\nimport json\nfrom pathlib import Path\nr=json.loads(Path("result.json").read_text())\nfor x in r.get("choices",[]):\n if x.get("message",{}).get("content"): print(x["message"]["content"])\nPY_RESULT\nfrom openai import OpenAI\nimport os\n\nif not os.environ.get("AILOOT_API_KEY", "").strip(): raise SystemExit("Set AILOOT_API_KEY before making a request")\nclient=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)\nresult=client.chat.completions.create(model='bytedance/ui-tars-1.5-7b',messages=[{"role":"user","content":"Explain observations and hypotheses in three sentences."}])\nimport base64, json\nfrom pathlib import Path\n\ndef save_result(data, stem="result"):\n # Keep every field, including usage, IDs, reasoning and tool requests.\n Path(stem + ".json").write_text(json.dumps(data, ensure_ascii=False, indent=2), encoding="utf-8")\n print(json.dumps(data, ensure_ascii=False, indent=2))\n def save_blob(encoded, suffix, label):\n raw = base64.b64decode(encoded, altchars=b"-_", validate=True)\n ext = "png" if raw.startswith(b"\\x89PNG\\r\\n\\x1a\\n") else "jpg" if raw.startswith(b"\\xff\\xd8") else "webp" if raw[:4] == b"RIFF" and raw[8:12] == b"WEBP" else suffix\n file = Path(stem + "-" + label + "." + ext)\n file.write_bytes(raw)\n print("Saved", file)\n for index, block in enumerate(data.get("content") or []):\n print("Content", index, json.dumps(block, ensure_ascii=False))\n for choice in data.get("choices") or []:\n print("Choice", choice.get("index"), json.dumps(choice.get("message", choice.get("delta", {})), ensure_ascii=False))\n for index, item in enumerate(data.get("output") or []):\n print("Output", index, json.dumps(item, ensure_ascii=False))\n if item.get("type") == "image_generation_call" and item.get("result"):\n save_blob(item["result"], item.get("output_format") or "bin", "output-" + str(index))\n for ci, candidate in enumerate(data.get("candidates") or []):\n for pi, part in enumerate((candidate.get("content") or {}).get("parts") or []):\n print("Candidate/part", ci, pi, json.dumps(part, ensure_ascii=False))\n blob = part.get("inlineData") or part.get("inline_data")\n if blob and blob.get("data"):\n mime = blob.get("mimeType") or blob.get("mime_type")\n suffix = {"image/png":"png", "image/jpeg":"jpg", "image/webp":"webp", "audio/wav":"wav", "audio/mpeg":"mp3", "video/mp4":"mp4"}.get(mime, "bin")\n save_blob(blob["data"], suffix, "candidate-" + str(ci) + "-part-" + str(pi))\n\nsave_result(result.to_dict(mode="json"))\nfrom openai import OpenAI\nimport os\nfrom pathlib import Path\n\nif not os.environ.get("AILOOT_API_KEY", "").strip(): raise SystemExit("Set AILOOT_API_KEY before making a request")\nclient=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)\nimport base64, json\nfrom pathlib import Path\n\ndef save_result(data, stem="result"):\n # Keep every field, including usage, IDs, reasoning and tool requests.\n Path(stem + ".json").write_text(json.dumps(data, ensure_ascii=False, indent=2), encoding="utf-8")\n print(json.dumps(data, ensure_ascii=False, indent=2))\n def save_blob(encoded, suffix, label):\n raw = base64.b64decode(encoded, altchars=b"-_", validate=True)\n ext = "png" if raw.startswith(b"\\x89PNG\\r\\n\\x1a\\n") else "jpg" if raw.startswith(b"\\xff\\xd8") else "webp" if raw[:4] == b"RIFF" and raw[8:12] == b"WEBP" else suffix\n file = Path(stem + "-" + label + "." + ext)\n file.write_bytes(raw)\n print("Saved", file)\n for index, block in enumerate(data.get("content") or []):\n print("Content", index, json.dumps(block, ensure_ascii=False))\n for choice in data.get("choices") or []:\n print("Choice", choice.get("index"), json.dumps(choice.get("message", choice.get("delta", {})), ensure_ascii=False))\n for index, item in enumerate(data.get("output") or []):\n print("Output", index, json.dumps(item, ensure_ascii=False))\n if item.get("type") == "image_generation_call" and item.get("result"):\n save_blob(item["result"], item.get("output_format") or "bin", "output-" + str(index))\n for ci, candidate in enumerate(data.get("candidates") or []):\n for pi, part in enumerate((candidate.get("content") or {}).get("parts") or []):\n print("Candidate/part", ci, pi, json.dumps(part, ensure_ascii=False))\n blob = part.get("inlineData") or part.get("inline_data")\n if blob and blob.get("data"):\n mime = blob.get("mimeType") or blob.get("mime_type")\n suffix = {"image/png":"png", "image/jpeg":"jpg", "image/webp":"webp", "audio/wav":"wav", "audio/mpeg":"mp3", "video/mp4":"mp4"}.get(mime, "bin")\n save_blob(blob["data"], suffix, "candidate-" + str(ci) + "-part-" + str(pi))\n\nwith client.chat.completions.stream(model='bytedance/ui-tars-1.5-7b',messages=[{"role":"user","content":"Explain observations and hypotheses in three sentences."}]) as stream:\n with Path("stream-events.jsonl").open("w",encoding="utf-8") as log:\n for event in stream:\n payload=event.to_dict(mode="json")\n log.write(json.dumps(payload,ensure_ascii=False)+"\\n"); log.flush()\n print(json.dumps(payload,ensure_ascii=False))\n final=stream.get_final_completion()\n save_result(final.to_dict(mode="json"),"stream-result")\njson 或 SSE
請保留所有完整傳回的回應、檔案與內容區塊。
保留每個候選項及其內容／工具呼叫／推理。SSE 中依候選項／工具索引組合增量，保留最終完成原因與用量。
保留請求／回應 ID 與標頭。未提供通用的文字工作擷取 URL。
| 欄位 | 類型 |
|---|---|
欄位choices[].index | 類型integer |
欄位choices[].message.content | 類型string|null |
欄位choices[].message.tool_calls | 類型tool_call[] |
欄位choices[].message.reasoning_content | 類型string |
欄位choices[].message.reasoning_details | 類型object|array |
欄位choices[].finish_reason | 類型string|null |
欄位usage | 類型object |
| 回應 | 條件 | 下一步 |
|---|---|---|
回應400 · invalid_request_error | 條件必要欄位、素材表示方式或參數值無效 | 下一步提出新的建立請求前，先修正指定欄位。 |
Ailoot Ultra bytedance/ui-tars-1.5-7b
請使用上方列出的 API 方法路徑。
bytedance/ui-tars-1.5-7bUI-TARS-1.5-7B 是 ByteDance 用於電腦操作代理的開放多模態模型。它根據螢幕截圖與任務推理，接著產生供應用程式執行的下一個 GUI 操作；此 7B 發行版著重一般電腦使用，並非針對遊戲最佳化。
此說明介紹模型的能力。Ailoot 可用的輸入、輸出與選項，依所選方法列於下方。
UI-TARS-1.5-7B 是 ByteDance 發布的 7B 多模態 GUI 代理模型，著重一般電腦使用。它結合介面的視覺感知與操作前推理，以原生 UI-TARS 架構為基礎加入強化學習。官方使用流程的輸入為指令、螢幕截圖與操作歷史；輸出描述下一個介面操作，通常附有說明預定步驟的 Thought。周邊應用程式執行該操作，提供下一張截圖，讓任務繼續。
開發商將這個可下載的 7B 檢查點與較大的 UI-TARS-1.5 研究模型區分。7B 發行版未特別針對遊戲情境最佳化，因此不應將較大研究模型的展示與結果，視為此版本的同等能力。它的實務角色是操作可見應用程式控制項：瀏覽器導覽、辦公軟體、檔案管理及類似桌面工作流程。讀取截圖並選擇操作，與生成影片或取得未顯示的應用程式狀態不同。
官方儲存庫描述桌面與行動操作範本。桌面操作涵蓋點擊、雙擊、按右鍵、拖曳、鍵盤快捷鍵、輸入文字及捲動，也提供 wait 與 finished 操作，用於檢查變動中的畫面或結束任務。行動範本加入長按、開啟應用程式，以及返回主畫面或上一頁等操作。獨立的定位範本要求僅提供 Action、不含 Thought，適合輕量操作輸出任務。選擇執行環境實際理解的操作詞彙，避免將所有範本視為可互換。
實用的任務說明會指出目標，提供目前截圖與相關操作歷史，並定義完成狀態。例如，原創編輯任務說明可以要求模型找到具名設定，將其改為指定值，並在新狀態可見後停止。根據目前畫面要求下一步，避免要求長串推測步驟。明確保留指令與允許操作的限制；執行一步後，傳回結果畫面，讓後續推理使用觀察結果，而非假設發生了什麼。
座標處理是官方工作流程的重要部分。儲存庫將模型預測，與剖析操作並將目標映射至螢幕的後處理分開。座標指南示範將縮放圖片中的座標轉回原始圖片尺寸。保留原始截圖寬高，並使用精確操作範本及剖析器所採用的座標慣例。縮放圖片中看似合理的位置，若直接套用至未縮放畫面，可能指向不同控制項。因此，模型操作文字是待解讀的指令，而非已執行的滑鼠事件。
部署指南提供具體的單步範例，其結果包含 Thought 與 Action；儲存庫中的桌面應用程式則是獨立執行介面。指南設定的輸入長度及範例輸出額度，是部署設定，並非對每種整合的上下文或操作限制做通用主張。實際 GUI 工作應傳送清楚可讀的截圖，包含下一次決策所需的控制項與周邊脈絡。UI-TARS 可能誤認元素、不正確描述陌生介面，或選擇次佳操作，尤其在畫面模糊不明時；每次操作後檢查新截圖，可讓這些錯誤持續對應實際任務狀態。
POST /v1/messagestextjson, sse| 欄位 | 類型 | 要求 | 值與限制 | 預設值 |
|---|---|---|---|---|
欄位model | 類型string | 要求必填 | 值與限制 bytedance/ui-tars-1.5-7b | 預設值— |
欄位messages | 類型message[] | 要求必填 | 值與限制 | 預設值— |
欄位messages[].role | 類型string | 要求必填 | 值與限制 user, assistant | 預設值— |
欄位messages[].content | 類型string | 要求必填 | 值與限制 | 預設值— |
欄位max_tokens | 類型integer | 要求必填 | 值與限制 | 預設值— |
欄位stream | 類型boolean | 要求選填 | 值與限制 | 預設值false |
文字 · UTF-8 文字
messages[].content 字串
| 參數 | 規格 |
|---|---|
參數content_type | 規格application/json |
參數required | 規格model, messages, max_tokens |
參數optional_controls | 規格stream |
參數material_types | 規格text |
參數text_file_material | 規格讀取實際 UTF-8 文件，將文字放入指定的 input 或訊息內容字串。 |
生命週期： synchronous_or_streamed
費率資訊不會增加請求選項。支援的參數列於所選方法中。
請逐一核對各項費用與所列條件。每組互為替代選項的設定只套用一種費率。
| 設定 | 費率表 | 上下文 Token 數大於 | 上下文 Token 數小於或等於 | 費用 |
|---|---|---|---|---|
| 設定詞元基本費率 | 費率表基本費率 | 上下文 Token 數大於— | 上下文 Token 數小於或等於無上限 | 費用 輸入 · 輸入 Token $0.0002 / 1K Token 輸出 · 輸出 Token $0.0004 / 1K Token 輸入 · 讀取快取 $0.0002 / 1K Token 輸入 · 寫入快取 — / 1K Token 輸入 · 寫入快取，1 小時 — / 1K Token |
| 設定請求長度級距 1 | 費率表— | 上下文 Token 數大於0 | 上下文 Token 數小於或等於無上限 | 費用 輸入 · 輸入 Token $0.0002 / 1K Token 輸出 · 輸出 Token $0.0004 / 1K Token 輸入 · 讀取快取 $0.0002 / 1K Token 輸入 · 寫入快取 — / 1K Token 輸入 · 寫入快取，1 小時 — / 1K Token |
Ailoot 會在請求前預留估算金額。取得結果後，依實測用量結算最終費用。串流結算採用最終用量紀錄。預留金額與結算的運作方式 →
{\n "model": "bytedance/ui-tars-1.5-7b",\n "max_tokens": 128,\n "messages": [\n {\n "role": "user",\n "content": "Summarize the incident report."\n }\n ],\n "stream": false\n}set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\n: "${AILOOT_TEXT_FILE:?Set your actual UTF-8 document}"\nexport AILOOT_TEXT_FILE\npython3 - <<'PY_REQUEST'\nimport json, os\nfrom pathlib import Path\n\nsource_file = Path(os.environ['AILOOT_TEXT_FILE'])\nif not source_file.is_file():\n raise SystemExit('Set AILOOT_TEXT_FILE to your actual UTF-8 document')\ntext = source_file.read_text(encoding='utf-8')\nif not text.strip():\n raise SystemExit('Choose a document containing text')\npayload = {'model': 'bytedance/ui-tars-1.5-7b', 'max_tokens': 128, 'messages': [{'role': 'user', 'content': 'Summarize the incident report.'}]}\npayload['messages'][0]['content'] = 'Summarize this material and quote supporting source passages.\\n\\n' + text\nPath('request.json').write_text(json.dumps(payload, ensure_ascii=False), encoding='utf-8')\nPY_REQUEST\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/messages \\\n -H "x-api-key: $AILOOT_API_KEY" -H 'anthropic-version: 2023-06-01' -H 'Content-Type: application/json' \\\n --data-binary @request.json -D response-headers.txt -o result.json\npython3 - <<'PY_RESULT'\nimport json\nfrom pathlib import Path\n\nresult = json.loads(Path('result.json').read_text(encoding='utf-8'))\nprint(json.dumps(result, ensure_ascii=False, indent=2))\nPY_RESULT\nimport json, os\nfrom pathlib import Path\n\nsource_file = Path(os.environ['AILOOT_TEXT_FILE'])\nif not source_file.is_file():\n raise SystemExit('Set AILOOT_TEXT_FILE to your actual UTF-8 document')\ntext = source_file.read_text(encoding='utf-8')\nif not text.strip():\n raise SystemExit('Choose a document containing text')\npayload = {'model': 'bytedance/ui-tars-1.5-7b', 'max_tokens': 128, 'messages': [{'role': 'user', 'content': 'Summarize the incident report.'}]}\npayload['messages'][0]['content'] = 'Summarize this material and quote supporting source passages.\\n\\n' + text\nfrom urllib.request import Request, urlopen\nfrom urllib.error import HTTPError\n\napi_key = os.environ['AILOOT_API_KEY']\nif not api_key.strip():\n raise SystemExit('Set AILOOT_API_KEY before making a request')\nheaders = {'x-api-key': 'PLACEHOLDER_KEY', 'anthropic-version': '2023-06-01', 'Content-Type': 'application/json'}\nheaders['x-api-key'] = api_key\nrequest = Request('https://api.ailoot.ai/v1/messages', data=json.dumps(payload, ensure_ascii=False).encode('utf-8'), headers=headers, method='POST')\ntry:\n with urlopen(request, timeout=120) as response:\n raw = response.read()\n Path('response-headers.txt').write_text(str(response.headers), encoding='utf-8')\nexcept HTTPError as error:\n Path('result.json').write_bytes(error.read())\n Path('response-headers.txt').write_text(str(error.headers), encoding='utf-8')\n raise\nPath('result.json').write_bytes(raw)\nimport json\nfrom pathlib import Path\n\nresult = json.loads(Path('result.json').read_text(encoding='utf-8'))\nprint(json.dumps(result, ensure_ascii=False, indent=2))\nJSON 或 SSE
請保留所有完整傳回的回應、檔案與內容區塊。
保留所有內容區塊、思考簽章與實際工具使用 ID。組合所有 SSE 區塊增量；第一個文字區塊不是完整輸出。
保留請求／回應 ID 與標頭。未提供通用的文字工作擷取 URL。
| 欄位 | 類型 |
|---|---|
欄位id | 類型string |
欄位model | 類型string |
欄位content[] | 類型text|thinking|tool_use|other content block |
欄位stop_reason | 類型string|null |
欄位usage | 類型object |
| 回應 | 條件 | 下一步 |
|---|---|---|
回應400 · invalid_request_error | 條件必要欄位、素材表示方式或參數值無效 | 下一步提出新的建立請求前，先修正指定欄位。 |
Ailoot Ultra bytedance/ui-tars-1.5-7b
請使用上方列出的 API 方法路徑。
英文技術範例
Choose a safe next interface step\n\nGoal: enable weekly email summaries. Text description of the current settings page: a checkbox labelled Weekly summary is unchecked; a Save button is below it. History: settings opened, no changes saved. Describe the next interface action and the state to verify afterward. Use labels rather than inventing screen coordinates.One proposed action, a brief reason and the resulting visible state an application should check.Check that the answer proposes checking Weekly summary before saving and does not claim that any click was executed.