Moondream 3.1 je verze vizuálně-jazykového modelu Moondream s architekturou směsi expertů. Vývojář uvádí celkem 9 miliard parametrů a přibližně 2 miliardy aktivních parametrů na token. Hlavním zaměřením této verze jsou odpovědi spojené s konkrétními objekty a oblastmi obrázku: důležité je scénu nejen popsat, ale také určit, ke které její části se výsledek vztahuje.
Oficiální karta původního modelu rozlišuje pět dovedností: otázku k obrázku, popisek, detekci objektů, určování bodů a segmentaci. Otázka poskytuje textové vysvětlení; detekce spojuje objekt s obdélníkovou oblastí; bod označuje jeho polohu; segmentace vymezuje zabíranou oblast. Tento přístup se hodí pro systémy, které potřebují určitý druh výsledku, nikoli volný popis celého obrázku.
V Ailoot je Moondream 3.1 připojena pro textové zprávy a textové odpovědi. Zpracování obrázků a poskytování vizuálních souřadnic či masek prostřednictvím specializovaných dovedností nejsou součástí současného rozhraní této karty. Pro textovou úlohu lze předat již připravený popis pozorování, tabulku vlastností nebo požadavky na výsledek a položit k nim otázku.
Jsou-li například údaje o produktech nebo objektech již vyjádřeny textem, lze požadavek postavit na výslovných kritériích: které vlastnosti se porovnávají, co považovat za shodu a jak označit chybějící hodnotu. Požádejte o zachování názvů a původních hodnot a krátké vysvětlení závěru podle předaných dat. Jde o práci s textovým záznamem pozorování; nenahrazuje prohlédnutí původní fotografie.
Pro tuto verzi je v Ailoot uveden kontext 32 000 tokenů. Do požadavku lze zahrnout instrukci, příklady požadovaného formátu a materiály ke zpracování. Vyžaduje-li úloha jednoznačnou volbu, je užitečné předem stanovit přípustné odpovědi a uvést kritéria: zadání je pak ověřitelné bez předpokladů o údajích, které na vstupu chybějí.
Specializace Moondream na vizuální porozumění neznamená, že je každý číselný nebo logický závěr automaticky přesný. V oficiální kartě vývojář odděluje úlohy detekce a prostorového přiřazení od obecných textových matematických úloh. Tuto verzi je vhodné vybírat s ohledem na konkrétní vstup a požadovanou odpověď; v Ailoot zůstává výsledkem současného připojení text.
", "aboutText": "### Moondream 3.1 a vazba na pozorovaná data\n\nMoondream 3.1 je verze vizuálně-jazykového modelu Moondream s architekturou směsi expertů. Vývojář uvádí celkem 9 miliard parametrů a přibližně 2 miliardy aktivních parametrů na token. Hlavním zaměřením této verze jsou odpovědi spojené s konkrétními objekty a oblastmi obrázku: důležité je scénu nejen popsat, ale také určit, ke které její části se výsledek vztahuje.\n\nOficiální karta původního modelu rozlišuje pět dovedností: otázku k obrázku, popisek, detekci objektů, určování bodů a segmentaci. Otázka poskytuje textové vysvětlení; detekce spojuje objekt s obdélníkovou oblastí; bod označuje jeho polohu; segmentace vymezuje zabíranou oblast. Tento přístup se hodí pro systémy, které potřebují určitý druh výsledku, nikoli volný popis celého obrázku.\n\n### Dostupný režim v Ailoot\n\nV Ailoot je Moondream 3.1 připojena pro textové zprávy a textové odpovědi. Zpracování obrázků a poskytování vizuálních souřadnic či masek prostřednictvím specializovaných dovedností nejsou součástí současného rozhraní této karty. Pro textovou úlohu lze předat již připravený popis pozorování, tabulku vlastností nebo požadavky na výsledek a položit k nim otázku.\n\nJsou-li například údaje o produktech nebo objektech již vyjádřeny textem, lze požadavek postavit na výslovných kritériích: které vlastnosti se porovnávají, co považovat za shodu a jak označit chybějící hodnotu. Požádejte o zachování názvů a původních hodnot a krátké vysvětlení závěru podle předaných dat. Jde o práci s textovým záznamem pozorování; nenahrazuje prohlédnutí původní fotografie.\n\n### Kontext a hranice výsledku\n\nPro tuto verzi je v Ailoot uveden kontext 32 000 tokenů. Do požadavku lze zahrnout instrukci, příklady požadovaného formátu a materiály ke zpracování. Vyžaduje-li úloha jednoznačnou volbu, je užitečné předem stanovit přípustné odpovědi a uvést kritéria: zadání je pak ověřitelné bez předpokladů o údajích, které na vstupu chybějí.\n\nSpecializace Moondream na vizuální porozumění neznamená, že je každý číselný nebo logický závěr automaticky přesný. V oficiální kartě vývojář odděluje úlohy detekce a prostorového přiřazení od obecných textových matematických úloh. Tuto verzi je vhodné vybírat s ohledem na konkrétní vstup a požadovanou odpověď; v Ailoot zůstává výsledkem současného připojení text.", "locale": "cs", "methods": [ { "html": "POST /v1/messagestexttextPOST /v1/responsestexttextPOST /v1/chat/completionstexttextPOST /v1beta/models/moondream/moondream3.1-9b-a2b:generateContenttexttext