AutoGLM Phone 9B Multilingual — смартфон интерфейсі арқылы жұмыс істейтін көмекшіге арналған Z.ai моделі. Ол табиғи тілдегі тапсырманы ағымдағы экранды көріп түсінумен біріктіреді, келесі қадамды жоспарлап, телефон-агент ортасы әрекет етуге пайдаланатын ақпаратты шығарады. Оның архитектурасы GLM 4.1V 9B Thinking-пен бірдей; атаулы Phone Multilingual нұсқасы жеке модель таңдауы болып қалады.
Жобаға шолу. Өндірушінің Phone Agent жүйесі экранды қабылдауды орындау циклімен біріктіреді. Орта интерфейсті түсіреді, модель тапсырманы пайымдайды, ал құрылғыны басқару компоненті таңдалған операцияны орындайды. Жаңа экран келесі қадамға кері байланыс береді. Жарияланған фреймворк Android құрылғылары үшін Android Debug Bridge қолданады және HarmonyOS үшін бөлек басқару жолын ұсынады. Модель қабылдау мен жоспарлауды, ал қосылған орта құрылғымен нақты әрекеттесуді қамтамасыз етеді.
Көптілді айырмашылық. Бастапқы AutoGLM Phone 9B қытай мобильді қолданбаларына оңтайланған. Multilingual нұсқасы ағылшын сценарийлерін қолдауды қосады және ағылшын не басқа тілдегі мазмұны бар қолданбаларға арналған. Жоба қытай және ағылшын тілдеріндегі нұсқау промпттарын да ұсынады. Тапсырманы сипаттағанда қолданба атауларын, іздеу сөздерін және көрінетін интерфейс мәтінін сақтаңыз; бұл мәліметтер сұралған әрекетті болжанған аудармаға емес, экранға байланыстырады.
Әрекетті жоспарлау. Жарияланған фреймворктің әрекет сөздігі қолданбаны іске қосуды, түртуді, мәтін теруді, сырғытуды, кері қайтуды, басты экранға оралуды, ұзақ басуды, екі рет түртуді және беттің жүктелуін күтуді қамтиды. Қолмен басқаруға беру әрекеті де бар. Бұларды экранға негізделген үдеріс сөздігі ретінде қолданыңыз: тиісті қолданбаны ашу, қажетті басқару элементін табу, сұралған мәтінді енгізу және жаңа бетті тексеру. Келесі әрекет ең жаңа интерфейске сүйенуге тиіс, өйткені жүктелу күйі не өзгерген орналасу алдыңғы бақылауды жарамсыз етуі мүмкін.
Нақты тапсырма дайындаңыз. Қолданбаны, мақсатты ақпаратты немесе нәтижені және маңызды шарттарды көрсетіңіз. Іздеу тапсырмасында дәл сұрауды, таңдау өлшемдерін және қажетті нәтижені, мысалы, сәйкес элементтер мен олардың көрінетін атрибуттарының тізімін беріңіз. Кеңсе үдерісінде экраннан қандай ақпарат жиналатынын және соңғы қорытынды қалай берілетінін көрсетіңіз. Ағымдағы скриншотты және көмекшінің үдерістің қай жерінде тұрғанын түсіндіретін жеткілікті алдыңғы қадамдарды қосыңыз. Сонда шығыс келесі операцияны ұсына алады немесе қандай көрінетін егжей-тегжей ілгерілеуге кедергі екенін түсіндіреді.
Адамның қатысуы. Ресми фреймворк сезімтал операцияны растау және кіру не тексеру коды қадамдарында қолмен басқаруға беру үшін кері шақыруларды ұсынады. Қолданба телефонды пайдаланушыға беріп, адам сол қадамды орындағаннан кейін жаңадан түсірілген экраннан жалғастыра алады. Көмекші ақпаратты табуды, әрекетті дайындауды және көзделген нәтижеге жетуді ажыратуы үшін аяқталу шартын айқын беріңіз.
Практикалық баптау үдеріске әсер етеді. Құрылғы рұқсаттарын, жұмыс істейтін скриншот жолын және мәтін енгізуді қоршаған орта қамтамасыз етеді. Өндірушінің Android баптауы мәтін енгізуге арнайы пернетақта компонентін, ал HarmonyOS жолы жүйенің өз енгізуін қолданады. Кейбір қорғалған экрандар қара түсірілім қайтаруы мүмкін. Экран қолжетімсіз не басқару элементі түсініксіз болса, келесі әрекетті құрмас бұрын жарамды көрініс немесе адам нұсқауын алыңыз. Модель жауабының өзі телефон операциясының орындалғанын дәлелдемейді; ілгерілеуді растау үшін пайда болған экранды тексеріңіз.
", "aboutText": "AutoGLM Phone 9B Multilingual — смартфон интерфейсі арқылы жұмыс істейтін көмекшіге арналған Z.ai моделі. Ол табиғи тілдегі тапсырманы ағымдағы экранды көріп түсінумен біріктіреді, келесі қадамды жоспарлап, телефон-агент ортасы әрекет етуге пайдаланатын ақпаратты шығарады. Оның архитектурасы GLM 4.1V 9B Thinking-пен бірдей; атаулы Phone Multilingual нұсқасы жеке модель таңдауы болып қалады.\n\nЖобаға шолу. Өндірушінің Phone Agent жүйесі экранды қабылдауды орындау циклімен біріктіреді. Орта интерфейсті түсіреді, модель тапсырманы пайымдайды, ал құрылғыны басқару компоненті таңдалған операцияны орындайды. Жаңа экран келесі қадамға кері байланыс береді. Жарияланған фреймворк Android құрылғылары үшін Android Debug Bridge қолданады және HarmonyOS үшін бөлек басқару жолын ұсынады. Модель қабылдау мен жоспарлауды, ал қосылған орта құрылғымен нақты әрекеттесуді қамтамасыз етеді.\n\nКөптілді айырмашылық. Бастапқы AutoGLM Phone 9B қытай мобильді қолданбаларына оңтайланған. Multilingual нұсқасы ағылшын сценарийлерін қолдауды қосады және ағылшын не басқа тілдегі мазмұны бар қолданбаларға арналған. Жоба қытай және ағылшын тілдеріндегі нұсқау промпттарын да ұсынады. Тапсырманы сипаттағанда қолданба атауларын, іздеу сөздерін және көрінетін интерфейс мәтінін сақтаңыз; бұл мәліметтер сұралған әрекетті болжанған аудармаға емес, экранға байланыстырады.\n\nӘрекетті жоспарлау. Жарияланған фреймворктің әрекет сөздігі қолданбаны іске қосуды, түртуді, мәтін теруді, сырғытуды, кері қайтуды, басты экранға оралуды, ұзақ басуды, екі рет түртуді және беттің жүктелуін күтуді қамтиды. Қолмен басқаруға беру әрекеті де бар. Бұларды экранға негізделген үдеріс сөздігі ретінде қолданыңыз: тиісті қолданбаны ашу, қажетті басқару элементін табу, сұралған мәтінді енгізу және жаңа бетті тексеру. Келесі әрекет ең жаңа интерфейске сүйенуге тиіс, өйткені жүктелу күйі не өзгерген орналасу алдыңғы бақылауды жарамсыз етуі мүмкін.\n\nНақты тапсырма дайындаңыз. Қолданбаны, мақсатты ақпаратты немесе нәтижені және маңызды шарттарды көрсетіңіз. Іздеу тапсырмасында дәл сұрауды, таңдау өлшемдерін және қажетті нәтижені, мысалы, сәйкес элементтер мен олардың көрінетін атрибуттарының тізімін беріңіз. Кеңсе үдерісінде экраннан қандай ақпарат жиналатынын және соңғы қорытынды қалай берілетінін көрсетіңіз. Ағымдағы скриншотты және көмекшінің үдерістің қай жерінде тұрғанын түсіндіретін жеткілікті алдыңғы қадамдарды қосыңыз. Сонда шығыс келесі операцияны ұсына алады немесе қандай көрінетін егжей-тегжей ілгерілеуге кедергі екенін түсіндіреді.\n\nАдамның қатысуы. Ресми фреймворк сезімтал операцияны растау және кіру не тексеру коды қадамдарында қолмен басқаруға беру үшін кері шақыруларды ұсынады. Қолданба телефонды пайдаланушыға беріп, адам сол қадамды орындағаннан кейін жаңадан түсірілген экраннан жалғастыра алады. Көмекші ақпаратты табуды, әрекетті дайындауды және көзделген нәтижеге жетуді ажыратуы үшін аяқталу шартын айқын беріңіз.\n\nПрактикалық баптау үдеріске әсер етеді. Құрылғы рұқсаттарын, жұмыс істейтін скриншот жолын және мәтін енгізуді қоршаған орта қамтамасыз етеді. Өндірушінің Android баптауы мәтін енгізуге арнайы пернетақта компонентін, ал HarmonyOS жолы жүйенің өз енгізуін қолданады. Кейбір қорғалған экрандар қара түсірілім қайтаруы мүмкін. Экран қолжетімсіз не басқару элементі түсініксіз болса, келесі әрекетті құрмас бұрын жарамды көрініс немесе адам нұсқауын алыңыз. Модель жауабының өзі телефон операциясының орындалғанын дәлелдемейді; ілгерілеуді растау үшін пайда болған экранды тексеріңіз.", "editorialOverlay": { "copy_fields": { "practical_html": "Ағылшын тіліндегі техникалық мысал
Plan the next phone-search step\n\nUse this text transcription of the current phone screen: app 'City Library'; search field 'Search catalog'; button 'Search'; no results shown. Goal: find books matching the exact title 'The Glass Harbor'. Propose only the next input action and the screen evidence needed afterward. Preserve the title and do not claim that a search has already run.One next-action proposal and a short description of the resulting screen evidence to inspect.The response uses the exact title and distinguishes proposed text entry from an executed search or a found book.zai-org/autoglm-phone-9b-multilingualСмартфон экрандарын түсінуге және интерфейс әрекеттерін жоспарлауға арналған Z.ai көру-тіл моделі. Multilingual нұсқасы ағылшын тіліндегі сценарийлерді және басқа тілдегі мазмұны бар интерфейстерді қолдайды; ұсынылған операцияларды қосылған телефон-агент ортасы орындайды.
Бұл сипаттама модель мүмкіндіктерін қамтиды. Ailoot жүйесінде таңдалған әдіс үшін қолжетімді кіріс, шығыс және параметрлер төменде берілген.
AutoGLM Phone 9B Multilingual — смартфон интерфейсі арқылы жұмыс істейтін көмекшіге арналған Z.ai моделі. Ол табиғи тілдегі тапсырманы ағымдағы экранды көріп түсінумен біріктіреді, келесі қадамды жоспарлап, телефон-агент ортасы әрекет етуге пайдаланатын ақпаратты шығарады. Оның архитектурасы GLM 4.1V 9B Thinking-пен бірдей; атаулы Phone Multilingual нұсқасы жеке модель таңдауы болып қалады.
Жобаға шолу. Өндірушінің Phone Agent жүйесі экранды қабылдауды орындау циклімен біріктіреді. Орта интерфейсті түсіреді, модель тапсырманы пайымдайды, ал құрылғыны басқару компоненті таңдалған операцияны орындайды. Жаңа экран келесі қадамға кері байланыс береді. Жарияланған фреймворк Android құрылғылары үшін Android Debug Bridge қолданады және HarmonyOS үшін бөлек басқару жолын ұсынады. Модель қабылдау мен жоспарлауды, ал қосылған орта құрылғымен нақты әрекеттесуді қамтамасыз етеді.
Көптілді айырмашылық. Бастапқы AutoGLM Phone 9B қытай мобильді қолданбаларына оңтайланған. Multilingual нұсқасы ағылшын сценарийлерін қолдауды қосады және ағылшын не басқа тілдегі мазмұны бар қолданбаларға арналған. Жоба қытай және ағылшын тілдеріндегі нұсқау промпттарын да ұсынады. Тапсырманы сипаттағанда қолданба атауларын, іздеу сөздерін және көрінетін интерфейс мәтінін сақтаңыз; бұл мәліметтер сұралған әрекетті болжанған аудармаға емес, экранға байланыстырады.
Әрекетті жоспарлау. Жарияланған фреймворктің әрекет сөздігі қолданбаны іске қосуды, түртуді, мәтін теруді, сырғытуды, кері қайтуды, басты экранға оралуды, ұзақ басуды, екі рет түртуді және беттің жүктелуін күтуді қамтиды. Қолмен басқаруға беру әрекеті де бар. Бұларды экранға негізделген үдеріс сөздігі ретінде қолданыңыз: тиісті қолданбаны ашу, қажетті басқару элементін табу, сұралған мәтінді енгізу және жаңа бетті тексеру. Келесі әрекет ең жаңа интерфейске сүйенуге тиіс, өйткені жүктелу күйі не өзгерген орналасу алдыңғы бақылауды жарамсыз етуі мүмкін.
Нақты тапсырма дайындаңыз. Қолданбаны, мақсатты ақпаратты немесе нәтижені және маңызды шарттарды көрсетіңіз. Іздеу тапсырмасында дәл сұрауды, таңдау өлшемдерін және қажетті нәтижені, мысалы, сәйкес элементтер мен олардың көрінетін атрибуттарының тізімін беріңіз. Кеңсе үдерісінде экраннан қандай ақпарат жиналатынын және соңғы қорытынды қалай берілетінін көрсетіңіз. Ағымдағы скриншотты және көмекшінің үдерістің қай жерінде тұрғанын түсіндіретін жеткілікті алдыңғы қадамдарды қосыңыз. Сонда шығыс келесі операцияны ұсына алады немесе қандай көрінетін егжей-тегжей ілгерілеуге кедергі екенін түсіндіреді.
Адамның қатысуы. Ресми фреймворк сезімтал операцияны растау және кіру не тексеру коды қадамдарында қолмен басқаруға беру үшін кері шақыруларды ұсынады. Қолданба телефонды пайдаланушыға беріп, адам сол қадамды орындағаннан кейін жаңадан түсірілген экраннан жалғастыра алады. Көмекші ақпаратты табуды, әрекетті дайындауды және көзделген нәтижеге жетуді ажыратуы үшін аяқталу шартын айқын беріңіз.
Практикалық баптау үдеріске әсер етеді. Құрылғы рұқсаттарын, жұмыс істейтін скриншот жолын және мәтін енгізуді қоршаған орта қамтамасыз етеді. Өндірушінің Android баптауы мәтін енгізуге арнайы пернетақта компонентін, ал HarmonyOS жолы жүйенің өз енгізуін қолданады. Кейбір қорғалған экрандар қара түсірілім қайтаруы мүмкін. Экран қолжетімсіз не басқару элементі түсініксіз болса, келесі әрекетті құрмас бұрын жарамды көрініс немесе адам нұсқауын алыңыз. Модель жауабының өзі телефон операциясының орындалғанын дәлелдемейді; ілгерілеуді растау үшін пайда болған экранды тексеріңіз.
POST /v1/chat/completionstexttext| Өріс | Түрі | Талап | Мәндер мен шектеулер | Әдепкі |
|---|---|---|---|---|
Өрісmodel | Түріstring | ТалапМіндетті | Мәндер мен шектеулер zai-org/autoglm-phone-9b-multilingual | Әдепкі— |
Өрісmessages | Түріmessage[] | ТалапМіндетті | Мәндер мен шектеулер Элементтердің ең аз саны: 1 | Әдепкі— |
Өрісmessages[].role | Түріstring | ТалапМіндетті | Мәндер мен шектеулер Мысалдар: system, user, assistant, tool, function Шарттар: Бұл рөлдер бастапқы кодтағы үйлесімділік түрлерінде айқын көрсетілген; рөлдердің нақты жиыны әр модельге байланысты. Модельге байланысты | Әдепкі— |
Өрісmessages[].content | Түріstring|content_part[]|null | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкі— |
Өрісmessages[].tool_calls | Түріtool_call[] | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкі— |
Өрісmessages[].tool_call_id | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер Мына жағдайда қолданылады: role=tool; нақты қайтарылған ID мәнін пайдаланыңыз | Әдепкі— |
Өрісmessages[].name | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкі— |
Өрісmessages[].reasoning_content | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер Мына жағдайда қолданылады: Модель пайымдауды пайдаланса, нақты қайтарылған пайымдауды қайта жіберіңіз | Әдепкі— |
Өрісmessages[].reasoning_details | Түріobject|array | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісmax_tokens | Түріinteger | ТалапМіндетті емес | Мәндер мен шектеулер Ең азы: 1 Модельге байланысты | Әдепкі— |
Өрісmax_completion_tokens | Түріinteger | ТалапМіндетті емес | Мәндер мен шектеулер Ең азы: 1 Модельге байланысты | Әдепкі— |
Өрісstream | Түріboolean | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкіfalse |
Өрісstream_options.include_usage | Түріboolean | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісtemperature | Түріnumber | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісtop_p | Түріnumber | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісstop | Түріstring|string[] | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісtools | Түріfunction_tool[] | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісtools[].type | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер function Модельге байланысты | Әдепкі— |
Өрісtools[].function.name | Түріstring | ТалапМіндетті | Мәндер мен шектеулер Мына жағдайда қолданылады: функция құралы берілген | Әдепкі— |
Өрісtools[].function.description | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкі— |
Өрісtools[].function.parameters | ТүріJSON_schema | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкі— |
Өрісtool_choice | Түріstring|object | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісparallel_tool_calls | Түріboolean | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісresponse_format | Түріobject | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісreasoning_effort | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісreasoning | Түріobject | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісservice_tier | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісinstructions | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер Үйлесімділік өрісі | Әдепкі— |
Өрісfunctions | Түріfunction[] | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісfunction_call | Түріstring|object | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісprompt_cache_options | Түріobject | ТалапМіндетті емес | Мәндер мен шектеулер Модельге байланысты | Әдепкі— |
Өрісmodalities | Түріstring[] | ТалапМіндетті емес | Мәндер мен шектеулер text | Әдепкі— |
Өрісprovider | Түріobject | ТалапМіндетті емес | Мәндер мен шектеулер Шарттар: Осы Ultra мәтіндік бағытында provider.options қабылданбайды | Әдепкі— |
Өрісcache_control.ttl | Түріstring | ТалапМіндетті емес | Мәндер мен шектеулер Шарттар: Сұрау кэшінің нақты орындарында 1h қабылданбайды | Әдепкі— |
Мәтін · UTF8 мәтіні
messages[].content
| Параметр | Параметр талаптары |
|---|---|
Параметрcontent_type | Параметр талаптарыapplication/json |
Параметрrequired | Параметр талаптарыmodel, messages |
Параметрmaterial_types | Параметр талаптарыtext |
Параметрmessages | Параметр талаптарыrole/content құрылымы бар хабарламалар жиымы |
Параметрfile_material | Параметр талаптарынақты UTF-8 құжаты сөзбе-сөз мәтін ретінде енгізіледі; файл ID-і болжанбайды |
Параметрoptional_controls | Параметр талаптарыstream, temperature, top_p, stop, max_tokens, max_completion_tokens, reasoning, response_format, tools, tool_choice |
Параметрcontrol_scope | Параметр талаптарымодельге байланысты; пайдаланушының функция құралдары қызмет жағында орындалатын құралдардан өзгеше |
Параметрoutput_modalities | Параметр талаптарыtext |
Параметрhosted_operations | Параметр талаптарыfalse |
Параметрmultimodal_input_binding | Параметр талаптарыnull |
Өмірлік цикл: synchronous_or_streamed
Модельдің дәл ID мәнін messages деректерімен бірге жіберіңіз.
Контекст ұзындығы шығыстың жоғарғы шегі емес.
Мәтіндік файл сөзбе-сөз мәтінді бере алады; кіріс суреттері, аудио және файл нысандары дәл байланыстыруды қажет етеді.
Тариф анықтамасы сұрау мүмкіндіктерін қоспайды. Қолдау көрсетілетін параметрлер таңдалған әдісте берілген.
| Баптау | Мөлшерлемелер кестесі | Төлем |
|---|---|---|
| БаптауТокендердің базалық тарифтері | Мөлшерлемелер кестесіНегізгі мөлшерлеме | Төлем Кіріс · Кіріс токендері $0.000072 / 1K токен Шығыс · Шығыс токендері $0.000286 / 1K токен Кіріс · Кэшті оқу $0 / 1K токен Кіріс · Кэшке жазу $0 / 1K токен Кіріс · Кэшке жазу, 1 сағ — / 1K токен |
Ailoot сұрау алдында болжамды соманы резервтейді. Нәтижеден кейін өлшенген пайдалану көлемі бойынша қорытынды төлемді шегереді. Ағындық жауап үшін төлем соңғы пайдалану жазбасы негізінде шегеріледі. Резервтеу мен төлемді есептеу тәртібі →
set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\npython3 - <<'PY_REQUEST'\nimport json,os\nfrom pathlib import Path\np=json.loads('{"model": "zai-org/autoglm-phone-9b-multilingual", "messages": [{"role": "user", "content": "Explain the difference between an observation and a hypothesis in three sentences."}]}')\n\nPath("request.json").write_text(json.dumps(p,ensure_ascii=False))\nPY_REQUEST\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/chat/completions \\\n -H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \\\n --data-binary @request.json -D response-headers.txt -o result.json\npython3 - <<'PY_RESULT'\nimport json\nfrom pathlib import Path\nr=json.loads(Path("result.json").read_text())\nfor x in r.get("choices",[]):\n if x.get("message",{}).get("content"): print(x["message"]["content"])\nPY_RESULT\nfrom openai import OpenAI\nimport os\n\nif not os.environ.get("AILOOT_API_KEY", "").strip(): raise SystemExit("Set AILOOT_API_KEY before making a request")\nclient=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)\nresult=client.chat.completions.create(model='zai-org/autoglm-phone-9b-multilingual',messages=[{"role":"user","content":"Explain observations and hypotheses in three sentences."}])\nimport base64, json\nfrom pathlib import Path\n\ndef save_result(data, stem="result"):\n # Keep every field, including usage, IDs, reasoning and tool requests.\n Path(stem + ".json").write_text(json.dumps(data, ensure_ascii=False, indent=2), encoding="utf-8")\n print(json.dumps(data, ensure_ascii=False, indent=2))\n def save_blob(encoded, suffix, label):\n raw = base64.b64decode(encoded, altchars=b"-_", validate=True)\n ext = "png" if raw.startswith(b"\\x89PNG\\r\\n\\x1a\\n") else "jpg" if raw.startswith(b"\\xff\\xd8") else "webp" if raw[:4] == b"RIFF" and raw[8:12] == b"WEBP" else suffix\n file = Path(stem + "-" + label + "." + ext)\n file.write_bytes(raw)\n print("Saved", file)\n for index, block in enumerate(data.get("content") or []):\n print("Content", index, json.dumps(block, ensure_ascii=False))\n for choice in data.get("choices") or []:\n print("Choice", choice.get("index"), json.dumps(choice.get("message", choice.get("delta", {})), ensure_ascii=False))\n for index, item in enumerate(data.get("output") or []):\n print("Output", index, json.dumps(item, ensure_ascii=False))\n if item.get("type") == "image_generation_call" and item.get("result"):\n save_blob(item["result"], item.get("output_format") or "bin", "output-" + str(index))\n for ci, candidate in enumerate(data.get("candidates") or []):\n for pi, part in enumerate((candidate.get("content") or {}).get("parts") or []):\n print("Candidate/part", ci, pi, json.dumps(part, ensure_ascii=False))\n blob = part.get("inlineData") or part.get("inline_data")\n if blob and blob.get("data"):\n mime = blob.get("mimeType") or blob.get("mime_type")\n suffix = {"image/png":"png", "image/jpeg":"jpg", "image/webp":"webp", "audio/wav":"wav", "audio/mpeg":"mp3", "video/mp4":"mp4"}.get(mime, "bin")\n save_blob(blob["data"], suffix, "candidate-" + str(ci) + "-part-" + str(pi))\n\nsave_result(result.to_dict(mode="json"))\nfrom openai import OpenAI\nimport os\nfrom pathlib import Path\n\nif not os.environ.get("AILOOT_API_KEY", "").strip(): raise SystemExit("Set AILOOT_API_KEY before making a request")\nclient=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)\nimport base64, json\nfrom pathlib import Path\n\ndef save_result(data, stem="result"):\n # Keep every field, including usage, IDs, reasoning and tool requests.\n Path(stem + ".json").write_text(json.dumps(data, ensure_ascii=False, indent=2), encoding="utf-8")\n print(json.dumps(data, ensure_ascii=False, indent=2))\n def save_blob(encoded, suffix, label):\n raw = base64.b64decode(encoded, altchars=b"-_", validate=True)\n ext = "png" if raw.startswith(b"\\x89PNG\\r\\n\\x1a\\n") else "jpg" if raw.startswith(b"\\xff\\xd8") else "webp" if raw[:4] == b"RIFF" and raw[8:12] == b"WEBP" else suffix\n file = Path(stem + "-" + label + "." + ext)\n file.write_bytes(raw)\n print("Saved", file)\n for index, block in enumerate(data.get("content") or []):\n print("Content", index, json.dumps(block, ensure_ascii=False))\n for choice in data.get("choices") or []:\n print("Choice", choice.get("index"), json.dumps(choice.get("message", choice.get("delta", {})), ensure_ascii=False))\n for index, item in enumerate(data.get("output") or []):\n print("Output", index, json.dumps(item, ensure_ascii=False))\n if item.get("type") == "image_generation_call" and item.get("result"):\n save_blob(item["result"], item.get("output_format") or "bin", "output-" + str(index))\n for ci, candidate in enumerate(data.get("candidates") or []):\n for pi, part in enumerate((candidate.get("content") or {}).get("parts") or []):\n print("Candidate/part", ci, pi, json.dumps(part, ensure_ascii=False))\n blob = part.get("inlineData") or part.get("inline_data")\n if blob and blob.get("data"):\n mime = blob.get("mimeType") or blob.get("mime_type")\n suffix = {"image/png":"png", "image/jpeg":"jpg", "image/webp":"webp", "audio/wav":"wav", "audio/mpeg":"mp3", "video/mp4":"mp4"}.get(mime, "bin")\n save_blob(blob["data"], suffix, "candidate-" + str(ci) + "-part-" + str(pi))\n\nwith client.chat.completions.stream(model='zai-org/autoglm-phone-9b-multilingual',messages=[{"role":"user","content":"Explain observations and hypotheses in three sentences."}]) as stream:\n with Path("stream-events.jsonl").open("w",encoding="utf-8") as log:\n for event in stream:\n payload=event.to_dict(mode="json")\n log.write(json.dumps(payload,ensure_ascii=False)+"\\n"); log.flush()\n print(json.dumps(payload,ensure_ascii=False))\n final=stream.get_final_completion()\n save_result(final.to_dict(mode="json"),"stream-result")\njson немесе SSE
Қайтарылған әр толық жауапты, файлды және мазмұн бөлігін сақтаңыз.
Әр жауап нұсқасын оның мазмұнымен, құрал шақыруларымен және пайымдауымен бірге сақтаңыз. SSE өзгерістерін жауап нұсқасы мен құрал индексі бойынша жинап, соңғы аяқталу себебі мен пайдалану деректерін сақтаңыз.
Сұрау мен жауаптың ID мәндерін және тақырыптарын сақтаңыз. Мәтіндік тапсырманы алуға арналған ортақ URL берілмеген.
| Өріс | Түрі |
|---|---|
Өрісchoices[].index | Түріinteger |
Өрісchoices[].message.content | Түріstring|null |
Өрісchoices[].message.tool_calls | Түріtool_call[] |
Өрісchoices[].message.reasoning_content | Түріstring |
Өрісchoices[].message.reasoning_details | Түріobject|array |
Өрісchoices[].finish_reason | Түріstring|null |
Өрісusage | Түріobject |
| Жауап | Шарт | Келесі қадам |
|---|---|---|
Жауап400 · invalid_request_error | ШартМіндетті өрістер, материалды ұсыну тәсілі немесе параметр мәні қате | Келесі қадамЖаңадан жасау сұрауын жібермес бұрын көрсетілген өрістерді түзетіңіз. |
Ailoot Ultra zai-org/autoglm-phone-9b-multilingual
Жоғарыда көрсетілген әдіс жолдарын пайдаланыңыз.
zai-org/autoglm-phone-9b-multilingualСмартфон экрандарын түсінуге және интерфейс әрекеттерін жоспарлауға арналған Z.ai көру-тіл моделі. Multilingual нұсқасы ағылшын тіліндегі сценарийлерді және басқа тілдегі мазмұны бар интерфейстерді қолдайды; ұсынылған операцияларды қосылған телефон-агент ортасы орындайды.
Бұл сипаттама модель мүмкіндіктерін қамтиды. Ailoot жүйесінде таңдалған әдіс үшін қолжетімді кіріс, шығыс және параметрлер төменде берілген.
AutoGLM Phone 9B Multilingual — смартфон интерфейсі арқылы жұмыс істейтін көмекшіге арналған Z.ai моделі. Ол табиғи тілдегі тапсырманы ағымдағы экранды көріп түсінумен біріктіреді, келесі қадамды жоспарлап, телефон-агент ортасы әрекет етуге пайдаланатын ақпаратты шығарады. Оның архитектурасы GLM 4.1V 9B Thinking-пен бірдей; атаулы Phone Multilingual нұсқасы жеке модель таңдауы болып қалады.
Жобаға шолу. Өндірушінің Phone Agent жүйесі экранды қабылдауды орындау циклімен біріктіреді. Орта интерфейсті түсіреді, модель тапсырманы пайымдайды, ал құрылғыны басқару компоненті таңдалған операцияны орындайды. Жаңа экран келесі қадамға кері байланыс береді. Жарияланған фреймворк Android құрылғылары үшін Android Debug Bridge қолданады және HarmonyOS үшін бөлек басқару жолын ұсынады. Модель қабылдау мен жоспарлауды, ал қосылған орта құрылғымен нақты әрекеттесуді қамтамасыз етеді.
Көптілді айырмашылық. Бастапқы AutoGLM Phone 9B қытай мобильді қолданбаларына оңтайланған. Multilingual нұсқасы ағылшын сценарийлерін қолдауды қосады және ағылшын не басқа тілдегі мазмұны бар қолданбаларға арналған. Жоба қытай және ағылшын тілдеріндегі нұсқау промпттарын да ұсынады. Тапсырманы сипаттағанда қолданба атауларын, іздеу сөздерін және көрінетін интерфейс мәтінін сақтаңыз; бұл мәліметтер сұралған әрекетті болжанған аудармаға емес, экранға байланыстырады.
Әрекетті жоспарлау. Жарияланған фреймворктің әрекет сөздігі қолданбаны іске қосуды, түртуді, мәтін теруді, сырғытуды, кері қайтуды, басты экранға оралуды, ұзақ басуды, екі рет түртуді және беттің жүктелуін күтуді қамтиды. Қолмен басқаруға беру әрекеті де бар. Бұларды экранға негізделген үдеріс сөздігі ретінде қолданыңыз: тиісті қолданбаны ашу, қажетті басқару элементін табу, сұралған мәтінді енгізу және жаңа бетті тексеру. Келесі әрекет ең жаңа интерфейске сүйенуге тиіс, өйткені жүктелу күйі не өзгерген орналасу алдыңғы бақылауды жарамсыз етуі мүмкін.
Нақты тапсырма дайындаңыз. Қолданбаны, мақсатты ақпаратты немесе нәтижені және маңызды шарттарды көрсетіңіз. Іздеу тапсырмасында дәл сұрауды, таңдау өлшемдерін және қажетті нәтижені, мысалы, сәйкес элементтер мен олардың көрінетін атрибуттарының тізімін беріңіз. Кеңсе үдерісінде экраннан қандай ақпарат жиналатынын және соңғы қорытынды қалай берілетінін көрсетіңіз. Ағымдағы скриншотты және көмекшінің үдерістің қай жерінде тұрғанын түсіндіретін жеткілікті алдыңғы қадамдарды қосыңыз. Сонда шығыс келесі операцияны ұсына алады немесе қандай көрінетін егжей-тегжей ілгерілеуге кедергі екенін түсіндіреді.
Адамның қатысуы. Ресми фреймворк сезімтал операцияны растау және кіру не тексеру коды қадамдарында қолмен басқаруға беру үшін кері шақыруларды ұсынады. Қолданба телефонды пайдаланушыға беріп, адам сол қадамды орындағаннан кейін жаңадан түсірілген экраннан жалғастыра алады. Көмекші ақпаратты табуды, әрекетті дайындауды және көзделген нәтижеге жетуді ажыратуы үшін аяқталу шартын айқын беріңіз.
Практикалық баптау үдеріске әсер етеді. Құрылғы рұқсаттарын, жұмыс істейтін скриншот жолын және мәтін енгізуді қоршаған орта қамтамасыз етеді. Өндірушінің Android баптауы мәтін енгізуге арнайы пернетақта компонентін, ал HarmonyOS жолы жүйенің өз енгізуін қолданады. Кейбір қорғалған экрандар қара түсірілім қайтаруы мүмкін. Экран қолжетімсіз не басқару элементі түсініксіз болса, келесі әрекетті құрмас бұрын жарамды көрініс немесе адам нұсқауын алыңыз. Модель жауабының өзі телефон операциясының орындалғанын дәлелдемейді; ілгерілеуді растау үшін пайда болған экранды тексеріңіз.
POST /v1/messagestextjson, sse| Өріс | Түрі | Талап | Мәндер мен шектеулер | Әдепкі |
|---|---|---|---|---|
Өрісmodel | Түріstring | ТалапМіндетті | Мәндер мен шектеулер zai-org/autoglm-phone-9b-multilingual | Әдепкі— |
Өрісmessages | Түріmessage[] | ТалапМіндетті | Мәндер мен шектеулер | Әдепкі— |
Өрісmessages[].role | Түріstring | ТалапМіндетті | Мәндер мен шектеулер user, assistant | Әдепкі— |
Өрісmessages[].content | Түріstring | ТалапМіндетті | Мәндер мен шектеулер | Әдепкі— |
Өрісmax_tokens | Түріinteger | ТалапМіндетті | Мәндер мен шектеулер | Әдепкі— |
Өрісstream | Түріboolean | ТалапМіндетті емес | Мәндер мен шектеулер | Әдепкіfalse |
Мәтін · UTF-8 мәтіні
messages[].content жолы
| Параметр | Параметр талаптары |
|---|---|
Параметрcontent_type | Параметр талаптарыapplication/json |
Параметрrequired | Параметр талаптарыmodel, messages, max_tokens |
Параметрoptional_controls | Параметр талаптарыstream |
Параметрmaterial_types | Параметр талаптарыtext |
Параметрtext_file_material | Параметр талаптарыНақты UTF-8 құжатын оқып, оның мәтінін көрсетілген кіріс жолына немесе хабарлама мазмұнының жолына қойыңыз. |
Өмірлік цикл: synchronous_or_streamed
Тариф анықтамасы сұрау мүмкіндіктерін қоспайды. Қолдау көрсетілетін параметрлер таңдалған әдісте берілген.
| Баптау | Мөлшерлемелер кестесі | Төлем |
|---|---|---|
| БаптауТокендердің базалық тарифтері | Мөлшерлемелер кестесіНегізгі мөлшерлеме | Төлем Кіріс · Кіріс токендері $0.000072 / 1K токен Шығыс · Шығыс токендері $0.000286 / 1K токен Кіріс · Кэшті оқу $0 / 1K токен Кіріс · Кэшке жазу $0 / 1K токен Кіріс · Кэшке жазу, 1 сағ — / 1K токен |
Ailoot сұрау алдында болжамды соманы резервтейді. Нәтижеден кейін өлшенген пайдалану көлемі бойынша қорытынды төлемді шегереді. Ағындық жауап үшін төлем соңғы пайдалану жазбасы негізінде шегеріледі. Резервтеу мен төлемді есептеу тәртібі →
{\n "model": "zai-org/autoglm-phone-9b-multilingual",\n "max_tokens": 128,\n "messages": [\n {\n "role": "user",\n "content": "Summarize the incident report."\n }\n ],\n "stream": false\n}set -eu\n: "${AILOOT_API_KEY:?Set your Ailoot API key}"\n: "${AILOOT_TEXT_FILE:?Set your actual UTF-8 document}"\nexport AILOOT_TEXT_FILE\npython3 - <<'PY_REQUEST'\nimport json, os\nfrom pathlib import Path\n\nsource_file = Path(os.environ['AILOOT_TEXT_FILE'])\nif not source_file.is_file():\n raise SystemExit('Set AILOOT_TEXT_FILE to your actual UTF-8 document')\ntext = source_file.read_text(encoding='utf-8')\nif not text.strip():\n raise SystemExit('Choose a document containing text')\npayload = {'model': 'zai-org/autoglm-phone-9b-multilingual', 'max_tokens': 128, 'messages': [{'role': 'user', 'content': 'Summarize the incident report.'}]}\npayload['messages'][0]['content'] = 'Summarize this material and quote supporting source passages.\\n\\n' + text\nPath('request.json').write_text(json.dumps(payload, ensure_ascii=False), encoding='utf-8')\nPY_REQUEST\ncurl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/messages \\\n -H "x-api-key: $AILOOT_API_KEY" -H 'anthropic-version: 2023-06-01' -H 'Content-Type: application/json' \\\n --data-binary @request.json -D response-headers.txt -o result.json\npython3 - <<'PY_RESULT'\nimport json\nfrom pathlib import Path\n\nresult = json.loads(Path('result.json').read_text(encoding='utf-8'))\nprint(json.dumps(result, ensure_ascii=False, indent=2))\nPY_RESULT\nimport json, os\nfrom pathlib import Path\n\nsource_file = Path(os.environ['AILOOT_TEXT_FILE'])\nif not source_file.is_file():\n raise SystemExit('Set AILOOT_TEXT_FILE to your actual UTF-8 document')\ntext = source_file.read_text(encoding='utf-8')\nif not text.strip():\n raise SystemExit('Choose a document containing text')\npayload = {'model': 'zai-org/autoglm-phone-9b-multilingual', 'max_tokens': 128, 'messages': [{'role': 'user', 'content': 'Summarize the incident report.'}]}\npayload['messages'][0]['content'] = 'Summarize this material and quote supporting source passages.\\n\\n' + text\nfrom urllib.request import Request, urlopen\nfrom urllib.error import HTTPError\n\napi_key = os.environ['AILOOT_API_KEY']\nif not api_key.strip():\n raise SystemExit('Set AILOOT_API_KEY before making a request')\nheaders = {'x-api-key': 'PLACEHOLDER_KEY', 'anthropic-version': '2023-06-01', 'Content-Type': 'application/json'}\nheaders['x-api-key'] = api_key\nrequest = Request('https://api.ailoot.ai/v1/messages', data=json.dumps(payload, ensure_ascii=False).encode('utf-8'), headers=headers, method='POST')\ntry:\n with urlopen(request, timeout=120) as response:\n raw = response.read()\n Path('response-headers.txt').write_text(str(response.headers), encoding='utf-8')\nexcept HTTPError as error:\n Path('result.json').write_bytes(error.read())\n Path('response-headers.txt').write_text(str(error.headers), encoding='utf-8')\n raise\nPath('result.json').write_bytes(raw)\nimport json\nfrom pathlib import Path\n\nresult = json.loads(Path('result.json').read_text(encoding='utf-8'))\nprint(json.dumps(result, ensure_ascii=False, indent=2))\nJSON немесе SSE
Қайтарылған әр толық жауапты, файлды және мазмұн бөлігін сақтаңыз.
Барлық мазмұн блоктарын, пайымдау қолтаңбаларын және құрал қолданудың нақты ID мәндерін сақтаңыз. SSE блоктарының барлық өзгерістерін жинаңыз; алғашқы мәтіндік блок толық шығыс емес.
Сұрау мен жауаптың ID мәндерін және тақырыптарын сақтаңыз. Мәтіндік тапсырманы алуға арналған ортақ URL берілмеген.
| Өріс | Түрі |
|---|---|
Өрісid | Түріstring |
Өрісmodel | Түріstring |
Өрісcontent[] | Түріtext|thinking|tool_use|other content block |
Өрісstop_reason | Түріstring|null |
Өрісusage | Түріobject |
| Жауап | Шарт | Келесі қадам |
|---|---|---|
Жауап400 · invalid_request_error | ШартМіндетті өрістер, материалды ұсыну тәсілі немесе параметр мәні қате | Келесі қадамЖаңадан жасау сұрауын жібермес бұрын көрсетілген өрістерді түзетіңіз. |
Ailoot Ultra zai-org/autoglm-phone-9b-multilingual
Жоғарыда көрсетілген әдіс жолдарын пайдаланыңыз.
Ағылшын тіліндегі техникалық мысал
Plan the next phone-search step\n\nUse this text transcription of the current phone screen: app 'City Library'; search field 'Search catalog'; button 'Search'; no results shown. Goal: find books matching the exact title 'The Glass Harbor'. Propose only the next input action and the screen evidence needed afterward. Preserve the title and do not claim that a search has already run.One next-action proposal and a short description of the resulting screen evidence to inspect.The response uses the exact title and distinguishes proposed text entry from an executed search or a found book.