Intfloat: E5-Base-v2
Az intfloat E5-Base-v2 angol szöveget alakít 768 dimenziós beágyazásokká 12 rétegű kódolóval. A query/passage előtagok és az 512 tokenes ablak határozzák meg az előkészítését kereséshez, parafrázis-összehasonlításhoz, klaszterezéshez és szövegjellemzőkhöz.
A modellről
Ez a leírás a modell képességeit ismerteti. Az Ailootban elérhető bemenetek, kimenetek és lehetőségek alább, a kiválasztott metódusnál láthatók.
Az E5-Base-v2 az intfloat 12 rétegű angol beágyazási modellje, 768 dimenziós reprezentációval. Az előkészített szöveget egyetlen numerikus vektorrá alakítja visszakereséshez, szemantikai összehasonlításhoz vagy más feladatban jellemzőként való használathoz. A Base v2 checkpoint különbözik a 24 rétegű, 1024 dimenziós Large v2 kiadástól és a külön tanított többnyelvű E5-modellektől.
Használja a betanított szerepelőtagokat
Az E5 szerepet vár a bemenet elején. Szövegrészlet-visszakeresésnél a kérdés „query:” előtaggal kezdődik, az esetleg választ tartalmazó forrás pedig „passage:” előtaggal. A gyártó szimmetrikus feladatokhoz, például szemantikai hasonlósághoz és parafrázis-visszakereséshez mindkét oldalon a „query:” előtagot ajánlja. Akkor is ezt az előtagot ajánlja, ha a vektorok klaszterezési vagy osztályozási jellemzők lesznek.
Például egy visszajelzés-gyűjtemény több, eltérően megfogalmazott kérést tartalmazhat ugyanarra a fejlesztésre. Ezeket a rekordokat az ajánlott szimmetrikus előkészítéssel kódolja, majd hasonlítsa össze vagy klaszterezze a kapott vektorokat. Minden reprezentációval együtt tartsa meg az eredeti megfogalmazást és rekordazonosítót, hogy egy klasztert tényleges ügyfélüzenetekként lehessen megvizsgálni, ne megmagyarázatlan számcsoportként.
Keresési gyűjteményhez a kérdéseket és forrásszövegrészleteket a nekik megfelelő szerepben készítse elő. Hasznos lekérdezés a „query: Which setting changes the notification frequency?”. A korpusz szövegrészlete megtartja a magyarázatot és releváns feltételeit. Az előtag a modell betanított előkészítésének része; a gyártó megjegyzi, hogy elhagyása csökkenti a teljesítményt.
Pooling és a reprezentáció összehasonlítása
A hivatalos példa a figyelmi maszkot figyelembe vevő átlagot számít a tokenreprezentációkból, kizárja a kitöltést, majd normalizálja a kapott vektort. A normalizált beágyazások skalárszorzata koszinuszhasonlóságot ad. A 768 kimeneti érték egy szöveget ír le; nem válasz, osztálycímke vagy páronkénti újrarangsorolási pontszám.
Klaszterezési munkafolyamatban egy másik szakasz csoportokat képez ezekből a vektorokból. Osztályozási munkafolyamatban egy másik szakasz bemeneti jellemzőként használja őket. E különbség megőrzése könnyebben értelmezhetővé teszi az eredményt: a beágyazás a rekordot reprezentálja, a későbbi feladat pedig csoportot vagy címkét határoz meg. Az összehasonlított reprezentációkhoz következetesen egy modellt és egy előkészítési konvenciót használjon.
Dolgozzon angol szöveggel és 512 tokenen belül
A modellkártya szerint ez a kiadás csak angol nyelven működik, és a hosszú szöveget legfeljebb 512 tokenre csonkítja. Ezen a terjedelmen belül összefüggő szövegrészleteket készítsen elő, a szükséges szerepelőtaggal együtt. A hosszú értékelést, jelentést vagy kézikönyvet értelmes szakaszok mentén kell felbontani, nem túlméretes bemenetként beágyazni, amelynek a vége elveszik.
A címsort tartsa az általa bevezetett mondatok mellett, és őrizze meg a szabály jelentését megváltoztató feltételt vagy kivételt. Rövid rekordoknál, például visszajelzésnél, tartsa meg a teljes üzenetet, ha elfér. A vektor mellett megőrzött forrásazonosító és verzió lehetővé teszi, hogy egy későbbi gyűjteményfrissítés a megfelelő rekordot cserélje le.
A hasonlóságot a feladatnak megfelelően értelmezze
A gyártó kifejti, hogy a koszinuszpontszámok relatív sorrendje fontosabb az abszolút értéknél. A szűrési küszöböt a gyűjtemény saját példáin kell értékelni, és a vektorhasonlóság nem egy egyező címke vagy helyes válasz kalibrált valószínűsége. Vizsgáljon meg közeli rekordokat és ismert nem egyező eseteket, amikor eldönti a vektorok felhasználását.
A hasznos eredmény angol keresési index, szemantikai összehasonlítási készlet vagy forrásrekordjaikkal párosított numerikus szövegjellemzők. Ez a Base v2 profil saját dimenziókat, poolingot és szerepelőkészítést ad; egy másik E5-kiadás vektorformája vagy nyelvi lefedettsége nem igazol felcserélhető reprezentációt.
Ailoot Ultra · Beágyazások POST /v1/embeddings intfloat/e5-base-v2
intfloat/e5-base-v2Kezdő lépések
Az intfloat E5-Base-v2 angol szöveget alakít 768 dimenziós beágyazásokká 12 rétegű kódolóval. A query/passage előtagok és az 512 tokenes ablak határozzák meg az előkészítését kereséshez, parafrázis-összehasonlításhoz, klaszterezéshez és szövegjellemzőkhöz.
- Elfogadott bemenetek
- Szöveg · token_ids
- Eredmények
- embedding
Elérhető az Ailootban · bemenetek és metódusok
Ailoot Ultra · Beágyazások POST /v1/embeddings
- Bemenet
text,token_ids- Kimenet
embedding- Kimeneti formátum
- json
| Mező | Típus | Követelmény | Értékek és korlátok | Alapértelmezett |
|---|---|---|---|---|
Mezőmodel | Típusstring | KövetelményKötelező | Értékek és korlátok intfloat/e5-base-v2 | Alapértelmezett— |
Mezőinput | Típusstring|string[]|integer[]|integer[][] | KövetelményKötelező | Értékek és korlátok Minimális elemszám: 1 Feltételek: Nem üres, homogén köteg. A tokenazonosítók nemnegatív egész számok. Bemeneti keret: Maximum: 512 · Szövegegység: UTF8-bájtok · Tokenegység: tokentömb elemei | Alapértelmezett— |
Mezőencoding_format | Típusstring | KövetelményOpcionális | Értékek és korlátok float | Alapértelmezettfloat |
Meződimensions | Típusinteger | KövetelményNem támogatott | Értékek és korlátok Minimum: 1 | Alapértelmezett— |
Mezőuser | Típusjson_value | KövetelményOpcionális | Értékek és korlátok Feltételek: A forrás engedélyezi ezt a JSON-metaadatmezőt; a szolgáltatónál érvényes pontos jelentése modellenként eltér. | Alapértelmezett— |
Mezősession_id | Típusjson_value | KövetelményOpcionális | Értékek és korlátok Feltételek: A forrás engedélyezi ezt a JSON-metaadatmezőt; a szolgáltatónál érvényes pontos jelentése modellenként eltér. | Alapértelmezett— |
Mezőtrace | Típusjson_value | KövetelményOpcionális | Értékek és korlátok Feltételek: A forrás engedélyezi ezt a JSON-metaadatmezőt; a szolgáltatónál érvényes pontos jelentése modellenként eltér. | Alapértelmezett— |
Mezőprovider | Típusobject | KövetelményOpcionális | Értékek és korlátok Feltételek: A provider.options elutasítva | Alapértelmezett— |
Bemeneti anyagok kombinációi
text_to_embedding
Metódus paraméterei és életciklusa
| Paraméter | Szerződés |
|---|---|
Paramétercontent_type | Szerződésapplication/json |
Paraméterrequired | Szerződésmodel, input |
Paraméterinput_shapes | Szerződésstring, string[], nonnegative_integer_token_array, nonnegative_integer_token_array[] |
Paraméterencoding_format | Szerződésfloat |
Paraméterdimensions_override | Szerződésfalse |
Paramétermax_input_budget_units | Szerződés512 |
Paramétermultimodal_objects | Szerződésfalse |
Paramétermaterial_types | Szerződéstext, token_ids |
Életciklus: synchronous_json
Őrizze meg minden vektor indexét és dimenzióját.
A multimodális modell neve ezen a pontos útvonalon nem teszi lehetővé képobjektumok használatát.
Díjcsomagok
A díjszabás nem ad új kérési lehetőségeket. A támogatott paraméterek a kiválasztott módszernél szerepelnek.
- Gyors mód
- Nincs megadva Ha a gyors mód van kiválasztva
- Flex mód
- Nincs megadva Ha a flex mód van kiválasztva
- Maximális gondolkodási ráfordítás
- Nincs megadva Ha a maximális gondolkodási ráfordításra a default beállításhoz tartozó korrekció vonatkozik
Ailoot-díjak
Árak beállításonként
| Beállítás | Díjtáblázat | Díj |
|---|---|---|
| BeállításTokenenkénti alapárak | DíjtáblázatAlapdíj | Díj Bemenet · Bemeneti tokenek $0.00001 / 1K token Kimenet · Kimeneti tokenek $0 / 1K token Bemenet · Gyorsítótár olvasása — / 1K token Bemenet · Írás a gyorsítótárba — / 1K token Bemenet · Írás a gyorsítótárba, 1 óra — / 1K token |
Az Ailoot a kérés előtt becsült összeget foglal le. Az eredmény után a mért használat alapján elszámolja a végső díjat. Folyamatos átvitel esetén a végső használati rekordot használja. A foglalás és az elszámolás működése →
Példakérések
Ailoot Ultra · Beágyazások
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
p=json.loads('{"model": "intfloat/e5-base-v2", "input": ["First document", "Second document"]}')
Path("request.json").write_text(json.dumps(p,ensure_ascii=False))
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/embeddings \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o result.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
r=json.loads(Path("result.json").read_text())
for x in r.get("data",[]): print(json.dumps({"index":x.get("index"),"embedding":x.get("embedding")}))
PY_RESULT
from openai import OpenAI
import os
client=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)
result=client.embeddings.create(model='intfloat/e5-base-v2',input=["First document","Second document"])
print(result)
for item in result.data:print(item.index,item.embedding)
Eredmények fogadása és mentése
Ailoot Ultra · Beágyazások
json
Őrizzen meg minden elkészült eredményt
Őrizzen meg minden teljes visszaadott választ, fájlt és tartalomrészt.
Őrizzen meg minden vektort az indexével együtt. A vektorok számának meg kell egyeznie a bemenetek számával; a dimenzióknak egységesnek kell lenniük.
Ha az eredeti választ ellenőrizni kell
Nem kerül bevezetésre külön beágyazási feladatvégpont.
Válaszmezők
| Mező | Típus |
|---|---|
Mezőobject | Típusstring |
Mezőmodel | Típusstring |
Meződata[].index | Típusinteger |
Meződata[].embedding | Típusfinite float[] |
Mezőusage | Típusobject |
Hibák és következő lépések
| Válasz | Feltétel | Következő lépés |
|---|---|---|
Válasz400 · invalid_request_error | FeltételÉrvénytelen kötelező mezők, az anyag érvénytelen reprezentációja vagy érvénytelen paraméterérték | Következő lépésJavítsa a jelzett mezőket egy új létrehozási kérés előtt. |
Álnevek
Modell álnevei
Ailoot Ultra intfloat/e5-base-v2
Metódusútvonalak álnevei
Használja a fent látható metódusútvonalakat.
Kapcsolódó modellazonosítók
FAQ · Intfloat: E5-Base-v2
- Milyen bemenetek és eredmények érhetők el?
POST /v1/embeddings·intfloat/e5-base-v2:text,token_ids→embedding- Mely mezőket használja a kérés?
POST /v1/embeddings·intfloat/e5-base-v2:model,input,encoding_format,provider- Milyen korlátok érvényesek?
POST /v1/embeddings·intfloat/e5-base-v2:input.budget.maximum:512(UTF8-bájtok);input.min_items:1