Moondream: Moondream 3.1

{"about":"### Moondream 3.1 ja yhteys havaintoaineistoon\n\nMoondream 3.1 on Moondreamin visuaalisen kielimallin versio, jossa on asiantuntijasekoitusarkkitehtuuri. Kehittäjä ilmoittaa yhteensä 9 miljardia parametria ja noin 2 miljardia aktiivista parametria tokenia kohden. Version pääsuunta on kuvan tiettyihin kohteisiin ja alueisiin sidotut vastaukset: näkymän kuvailun lisäksi on tärkeää osoittaa, mihin sen osaan tulos liittyy.\n\nAlkuperäisen mallin virallisessa kortissa erotetaan viisi taitoa: kuvakysymykset, kuvatekstit, kohteiden tunnistus, pisteiden osoittaminen ja segmentointi. Kysymys antaa tekstiselityksen; tunnistus yhdistää kohteen suorakulmaiseen alueeseen; piste osoittaa sen sijainnin; segmentointi erottaa sen peittämän alueen. Tämä sopii järjestelmiin, jotka tarvitsevat tietyn tulostyypin koko kuvan vapaan kuvauksen sijaan.\n\n### Käytettävissä oleva tila Ailoot API:ssa\n\nAiloot API:ssa Moondream 3.1 on liitetty tekstiviesteihin ja tekstivastauksiin. Kuvien käsittely sekä visuaalisten koordinaattien tai maskien tuottaminen erikoistaidoilla eivät sisälly tämän mallikortin nykyiseen rajapintaan. Tekstitehtävään voi antaa valmiin havaintokuvauksen, ominaisuustaulukon tai tulosvaatimukset ja esittää niitä koskevan kysymyksen.\n\nJos tuotteiden tai kohteiden tiedot ovat jo tekstinä, pyynnön voi rakentaa selkeiden kriteerien ympärille: mitä ominaisuuksia verrataan, mikä lasketaan vastaavuudeksi ja miten puuttuva arvo merkitään. Pyydä säilyttämään nimet ja alkuperäiset arvot sekä liittämään johtopäätökseen lyhyt selitys annettujen tietojen perusteella. Tämä on havaintojen tekstimuotoisen tallenteen käsittelyä; se ei korvaa alkuperäisen valokuvan tarkastelua.\n\n### Konteksti ja tuloksen rajat\n\nAiloot API:ssa tälle versiolle ilmoitetaan 32 000 tokenin konteksti. Pyyntöön voi sisällyttää ohjeen, esimerkkejä halutusta muodosta ja käsiteltävät aineistot. Jos tehtävä vaatii yksiselitteisen valinnan, sallitut vastaukset ja kriteerit kannattaa määritellä etukäteen: näin tehtävä on tarkistettava ilman oletuksia syötteestä puuttuvista tiedoista.\n\nMoondreamin erikoistuminen visuaaliseen ymmärtämiseen ei tarkoita, että jokainen numeerinen tai looginen johtopäätös olisi automaattisesti oikea. Virallisessa mallikortissa kehittäjä erottaa kohteiden tunnistuksen ja paikannuksen yleisistä tekstimuotoisista matematiikkatehtävistä. Versio kannattaa valita tietyn syötteen ja tarvittavan vastauksen mukaan; Ailoot API:n nykyisen liitännän tulos on edelleen tekstiä.","alias_of":null,"aliases":[],"author":"Moondream","canonical_model":"moondream/moondream3.1-9b-a2b","ctx":null,"formats":["chat","gemini","messages","responses"],"id":"moondream/moondream3.1-9b-a2b","input":["text"],"kind":"text","max_out":null,"methods":[{"cache_read":null,"cache_write":null,"cache_write_1h":null,"cache_write_5m":null,"conditional_meter":null,"ctx":null,"family":"anthropic","fast_multiplier":1,"flex_multiplier":1,"fmt":"messages","http":"POST","img_in":null,"img_out":null,"in":0.6,"input":["text"],"label":"Anthropic Messages","max_out":null,"max_tool_calls":null,"out":5.0,"output":["text"],"path":"/v1/messages","request_model_id":"moondream/moondream3.1-9b-a2b","route_label":"Ultra","status_reads":[],"tiers":[],"tool_prices":null,"unit":"token","units":[]},{"cache_read":null,"cache_write":null,"cache_write_1h":null,"cache_write_5m":null,"conditional_meter":null,"ctx":null,"family":"openai","fast_multiplier":1,"flex_multiplier":1,"fmt":"responses","http":"POST","img_in":null,"img_out":null,"in":0.6,"input":["text"],"label":"OpenAI Responses","max_out":null,"max_tool_calls":null,"out":5.0,"output":["text"],"path":"/v1/responses","request_model_id":"moondream/moondream3.1-9b-a2b","route_label":"Ultra","status_reads":[],"tiers":[],"tool_prices":null,"unit":"token","units":[]},{"cache_read":null,"cache_write":null,"cache_write_1h":null,"cache_write_5m":null,"conditional_meter":null,"ctx":null,"family":"openai","fast_multiplier":1,"flex_multiplier":1,"fmt":"chat","http":"POST","img_in":null,"img_out":null,"in":0.6,"input":["text"],"label":"OpenAI Chat","max_out":null,"max_tool_calls":null,"out":5.0,"output":["text"],"path":"/v1/chat/completions","request_model_id":"moondream/moondream3.1-9b-a2b","route_label":"Ultra","status_reads":[],"tiers":[],"tool_prices":null,"unit":"token","units":[]},{"cache_read":null,"cache_write":null,"cache_write_1h":null,"cache_write_5m":null,"conditional_meter":null,"ctx":null,"family":"gemini","fast_multiplier":1,"flex_multiplier":1,"fmt":"gemini","http":"POST","img_in":null,"img_out":null,"in":0.6,"input":["text"],"label":"Gemini generateContent","max_out":null,"max_tool_calls":null,"out":5.0,"output":["text"],"path":"/v1beta/models/moondream/moondream3.1-9b-a2b:generateContent","request_model_id":"moondream/moondream3.1-9b-a2b","route_label":"Ultra","status_reads":[],"tiers":[],"tool_prices":null,"unit":"token","units":[]}],"model_aliases":[{"canonical_model_id":"moondream/moondream3.1-9b-a2b","request_model_id":"moondream/moondream3.1-9b-a2b","route_label":"Ultra"}],"name":"Moondream: Moondream 3.1","price":{"in":0.6,"in_label":null,"out":5.0,"out_label":null,"sort_in":0.6,"sort_out":5.0,"varies":false},"public_id":"moondream/moondream3.1-9b-a2b","short":"Moondream 3.1 -versio painottaa vastausten tarkkaa yhdistämistä näkymän kohteisiin; Ailoot API:ssa käytettävissä on tekstityö."}