Sentence Transformers: paraphrase-MiniLM-L6-v2
Sentence Transformers paraphrase-MiniLM-L6-v2 kuvaa virkkeet ja lyhyet kappaleet 384-ulotteisiksi vektoreiksi semanttista hakua ja ryhmittelyä varten. Sen julkaistu kokoonpano käyttää keskiarvopoolingia ja 128 tokenin sekvenssiasetusta.
Tietoa mallista
Tämä kuvaus kattaa mallin ominaisuudet. Ailootissa saatavilla olevat syötteet, tulosteet ja asetukset luetellaan alla valitulle menetelmälle.
paraphrase-MiniLM-L6-v2 on Sentence Transformersin upotusmalli virkkeille ja lyhyille kappaleille. Se kuvaa jokaisen tekstin 384-ulotteiseen tiheään vektoriavaruuteen, ja semanttinen haku sekä ryhmittely ovat valmistajan ilmoittamia tehtäviä. Julkaistu arkkitehtuuri yhdistää transformerin keskiarvopoolingiin; sen määritetty sekvenssipituus on 128 tokenia.
Esitä katkelma, jota haluat verrata
Valmistele todellinen virke tai lyhyt kappale ja säilytä aihe sekä tärkeät ehdot muuttumattomina. Käytännön kokoelma voi sisältää eri tavoin muotoiltuja kysymyksiä tai lyhyitä kuvauksia toisiinsa liittyvistä aiheista. Upota kukin tietue ja säilytä sen alkuperäinen sanamuoto sekä tunniste, jotta myöhempi vertailu voi palauttaa itse tekstin.
Esimerkiksi useat ohjekysymykset voivat kuvata samaa vaikeutta eri termein. Samankaltaisuusvaihe voi tuoda nämä ehdokkaat yhteen, minkä jälkeen niiden sanamuotoja voidaan tutkia todellisen ongelman tunnistamiseksi. Upotus on tässä vertailussa käytettävä numeerinen esitys; se ei kirjoita parafraasia tai anna itsenäisesti lopullista ryhmätunnusta.
Keskiarvopooling ja vektorien käyttö
Valmistajan suorakoodausesimerkki huomioi attention-maskin tokenesityksiä keskiarvoistettaessa ja sulkee täytepositiot pois. Sen arkkitehtuuri valitsee nimenomaisesti keskiarvopoolingin eikä valitse CLS- tai max-poolingia. Säilytä tämä pooling-menetelmä mallin yhteydessä valmistellessasi vertailukelpoisia vektoreita.
Jokaisessa palautetussa esityksessä on 384 komponenttia. Indeksi tai ryhmittelyvaihe käyttää näitä vektoreita valitulla samankaltaisuuskokoonpanolla, ja taustalla oleva lähdetietue pysyy tarkasteltavissa. Pidä malli, syötteen valmistelu ja vertailuasetukset samoina vertailtavien kohteiden välillä. Toisen mallin 384 tulosarvoa eivät pelkän muodon perusteella kuulu samaan upotusavaruuteen.
Lyhyet syötteet julkaistussa kokoonpanossa
Sentence Transformerin viitekokoonpano käyttää 128 tokenin enimmäissekvenssipituutta. Valmistele pitkä lähde lyhyiksi yhtenäisiksi kokonaisuuksiksi yhden liian suuren kappaleen sijaan. Säännön sisältävä virke voi tarvita seuraavan virkkeen poikkeuksen; säilytä tämä pieni kokonaisuus yhdessä, kun se mahtuu mukaan. Sana- tai merkkimäärä ei suoraan osoita tokenpituutta.
Säilytä lyhyiden kuvausten joukossa vertailulle tärkeät nimet ja erottavat ominaisuudet. Pelkän epämääräisen luokan sisältävä tietue voi olla vaikea erottaa muista samantyyppisistä tietueista. Tallenna lähdeyhteys vektorin ulkopuolelle, jotta palautettu ehdokas voidaan tarkistaa alkuperäistä materiaalia vasten.
Haun ja ryhmittelyn tulokset
Esitä semanttisessa haussa kysely ja korpusmateriaali tällä samalla mallilla ja palauta ehdokastietueet lähdeteksteineen. Ryhmittelyssä toinen vaihe muodostaa vektoreista ryhmiä. Tutki ryhmän rajan lähellä olevat tietueet ennen ryhmittelyn käyttämistä tuotepäätöksenä tai automaattisena luokkatunnuksena.
Hyödyllinen tulos on alkuperäiseen tietueeseensa liitetty lyhyen tekstin kompakti esitys. Tällä täsmällisellä paraphrase-MiniLM-L6-v2-checkpointilla on oma pooling- ja sekvenssikokoonpanonsa. all-MiniLM ja monikieliset paraphrase-variantit ovat erillisiä malliprofiileja; niiden koulutus, kielten soveltamisala tai syöteasetukset eivät seuraa yhteisestä MiniLM-nimestä.
Ailoot Ultra · Vektoriesitykset POST /v1/embeddings sentence-transformers/paraphrase-minilm-l6-v2
sentence-transformers/paraphrase-minilm-l6-v2
sentence-transformers/paraphrase-minilm-l6-v2Aloitus
Sentence Transformers paraphrase-MiniLM-L6-v2 kuvaa virkkeet ja lyhyet kappaleet 384-ulotteisiksi vektoreiksi semanttista hakua ja ryhmittelyä varten. Sen julkaistu kokoonpano käyttää keskiarvopoolingia ja 128 tokenin sekvenssiasetusta.
- Hyväksytyt syötteet
- Teksti · token_ids
- Tulokset
- embedding
Saatavilla Ailootissa · syötteet & menetelmät
Ailoot Ultra · Vektoriesitykset POST /v1/embeddings
- Syötetyypit
text,token_ids- Tulostyypit
embedding- Tulosteen muoto
- json
| Kenttä | Tyyppi | Vaatimus | Arvot & rajat | Oletus |
|---|---|---|---|---|
Kenttämodel | Tyyppistring | VaatimusPakollinen | Arvot & rajat sentence-transformers/paraphrase-minilm-l6-v2 | Oletus— |
Kenttäinput | Tyyppistring|string[]|integer[]|integer[][] | VaatimusPakollinen | Arvot & rajat Kohteiden vähimmäismäärä: 1 Ehdot: Ei-tyhjä, yhdenmukaisista alkioista koostuva erä. Tokenien ID:t ovat ei-negatiivisia kokonaislukuja. Syötebudjetti: Enimmäismäärä: 512 · Tekstiyksikkö: UTF8-tavut · Tokenyksikkö: Token-taulukon alkiot | Oletus— |
Kenttäencoding_format | Tyyppistring | VaatimusValinnainen | Arvot & rajat float | Oletusfloat |
Kenttädimensions | Tyyppiinteger | VaatimusEi tuettu | Arvot & rajat Vähimmäismäärä: 1 | Oletus— |
Kenttäuser | Tyyppijson_value | VaatimusValinnainen | Arvot & rajat Ehdot: Lähde sallii tämän JSON-metatietokentän; tarkka alkuperäisen palvelun semantiikka on mallikohtainen. | Oletus— |
Kenttäsession_id | Tyyppijson_value | VaatimusValinnainen | Arvot & rajat Ehdot: Lähde sallii tämän JSON-metatietokentän; tarkka alkuperäisen palvelun semantiikka on mallikohtainen. | Oletus— |
Kenttätrace | Tyyppijson_value | VaatimusValinnainen | Arvot & rajat Ehdot: Lähde sallii tämän JSON-metatietokentän; tarkka alkuperäisen palvelun semantiikka on mallikohtainen. | Oletus— |
Kenttäprovider | Tyyppiobject | VaatimusValinnainen | Arvot & rajat Ehdot: provider.options hylätty | Oletus— |
Syöteaineistojen yhdistelmät
text_to_embedding
Menetelmän parametrit ja elinkaari
| Parametri | Sopimus |
|---|---|
Parametricontent_type | Sopimusapplication/json |
Parametrirequired | Sopimusmodel, input |
Parametriinput_shapes | Sopimusstring, string[], nonnegative_integer_token_array, nonnegative_integer_token_array[] |
Parametriencoding_format | Sopimusfloat |
Parametridimensions_override | Sopimusfalse |
Parametrimax_input_budget_units | Sopimus512 |
Parametrimultimodal_objects | Sopimusfalse |
Parametrimaterial_types | Sopimustext, token_ids |
Elinkaari: synchronous_json
Säilytä jokaisen vektorin indeksi ja ulottuvuus.
Mallin nimen multimodaalisuus ei tarkoita, että tämä nimenomainen reitti hyväksyisi kuvaolioita.
Hinnoittelu
Hintatiedot eivät lisää pyyntövalintoja. Tuetut parametrit on lueteltu valitulle menetelmälle.
- Nopea tila
- Ei määritetty Kun nopea tila on valittu
- Flex-tila
- Ei määritetty Kun flex-tila on valittu
- Päättelyn enimmäisteho
- Ei määritetty Kun päättelyn enimmäistehoon sovelletaan default-oletussäätöä
Ailoot-hinnat
Hinnat asetusten mukaan
| Asetukset | Hinnasto | Veloitus |
|---|---|---|
| AsetuksetTokenien perushinnat | HinnastoPerushinta | Veloitus Syöte · Syötetokenit $0.00001 / 1K tokenia Tuloste · Tulostokenit $0 / 1K tokenia Syöte · Välimuistin luku — / 1K tokenia Syöte · Välimuistiin kirjoitus — / 1K tokenia Syöte · Välimuistiin kirjoitus, 1 tunti — / 1K tokenia |
Ailoot varaa arvioidun summan ennen pyyntöä. Tuloksen jälkeen lopullinen veloitus toteutetaan mitatun käytön perusteella. Suoratoiston veloituksessa käytetään lopullista käyttötietuetta. Varauksen ja lopullisen veloituksen toiminta →
Esimerkkipyynnöt
Ailoot Ultra · Vektoriesitykset
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
p=json.loads('{"model": "sentence-transformers/paraphrase-minilm-l6-v2", "input": ["First document", "Second document"]}')
Path("request.json").write_text(json.dumps(p,ensure_ascii=False))
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/embeddings \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o result.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
r=json.loads(Path("result.json").read_text())
for x in r.get("data",[]): print(json.dumps({"index":x.get("index"),"embedding":x.get("embedding")}))
PY_RESULT
from openai import OpenAI
import os
client=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)
result=client.embeddings.create(model='sentence-transformers/paraphrase-minilm-l6-v2',input=["First document","Second document"])
print(result)
for item in result.data:print(item.index,item.embedding)
Vastaanota ja tallenna tulokset
Ailoot Ultra · Vektoriesitykset
json
Säilytä kaikki valmistuneet tulokset
Säilytä jokainen kokonainen palautettu vastaus, tiedosto ja sisällön osa.
Säilytä jokainen vektori indekseineen. Vektorien määrän on vastattava syötteiden määrää; ulottuvuuksien on oltava yhdenmukaiset.
Jos alkuperäinen vastaus on tarkistettava
Uutta upotustehtävien päätepistettä ei oteta käyttöön.
Vastauksen kentät
| Kenttä | Tyyppi |
|---|---|
Kenttäobject | Tyyppistring |
Kenttämodel | Tyyppistring |
Kenttädata[].index | Tyyppiinteger |
Kenttädata[].embedding | Tyyppifinite float[] |
Kenttäusage | Tyyppiobject |
Virheet ja seuraavat vaiheet
| Vastaus | Ehto | Seuraava vaihe |
|---|---|---|
Vastaus400 · invalid_request_error | EhtoVirheelliset pakolliset kentät, aineiston esitysmuoto tai parametrin arvo | Seuraava vaiheKorjaa ilmoitetut kentät ennen uutta luontipyyntöä. |
Aliakset
Mallin aliakset
Ailoot Ultra sentence-transformers/paraphrase-minilm-l6-v2
Menetelmäpolkujen aliakset
Käytä yllä näytettyjä menetelmäpolkuja.
Liittyvät kutsujan ID:t
FAQ · Sentence Transformers: paraphrase-MiniLM-L6-v2
- Mitä syötteitä ja tuloksia on saatavilla?
POST /v1/embeddings·sentence-transformers/paraphrase-minilm-l6-v2:text,token_ids→embedding- Mitä kenttiä pyyntö käyttää?
POST /v1/embeddings·sentence-transformers/paraphrase-minilm-l6-v2:model,input,encoding_format,provider- Mitä rajoja sovelletaan?
POST /v1/embeddings·sentence-transformers/paraphrase-minilm-l6-v2:input.budget.maximum:512(UTF8-tavut);input.min_items:1