Intfloat: Multilingual-E5-Large
intfloat Multilingual-E5-Large kodar flerspråkig text till 1024-dimensionella vektorer med en modell på 24 lager. Den stöder XLM-R:s omfattning på hundra språk, använder engelska query/passage-prefix för alla språk och kapar indata vid 512 token.
Om modellen
Den här beskrivningen omfattar modellens förmågor. Tillgängliga indata, utdata och alternativ i Ailoot anges nedan för den valda metoden.
Multilingual-E5-Large är intfloats flerspråkiga modell för täta textinbäddningar, med 24 lager och ett 1024-dimensionellt resultat. Den har initierats från XLM-RoBERTa Large och tränats vidare på flerspråkiga data. Modellkortet beskriver stöd för XLM-R:s omfattning på hundra språk och påpekar samtidigt svagare prestanda för språk med begränsade resurser. Vektorerna representerar text för informationssökning, semantisk jämförelse och uppgifter med numeriska egenskaper.
Bevara indatarollen på alla språk
De inlärda prefixen är ”query:” och ”passage:”, även för icke-engelsk text. En sökfråga och dess korpuspassager använder sina respektive roller. Prefixen förblir dessa engelska strängar, medan källans ordalydelse behåller sitt eget språk. För symmetrisk semantisk likhet, sökning efter parafraser, utvinning av parallelltext eller användning som egenskaper rekommenderar tillverkaren ”query:”.
En praktisk samling kan innehålla dokumentation på flera språk som stöds. Behåll varje passages språk, ursprungliga text och källplats tillsammans med vektorn. Förbered verkliga sökfrågor från målgruppen i stället för att anta att ett engelskt test representerar hela samlingen. Resultatet bör returnera den faktiska passagen och dess sammanhang så att läsaren kan bedöma vad den säger.
För en flerspråkig matchningsuppgift ska jämförelsens syfte vara tydligt. Ett möjligt översättningspar och en fråga som söker en stödjande passage kräver olika förberedelser. Modellens vägledning om rollprefix ger en konkret konvention för dessa uppgifter; att utelämna prefixet är inte den dokumenterade motsvarigheten eftersom det ändrar indatamönstret som användes vid träningen.
Poolning och vektorjämförelse
Tillverkarens exempel beräknar medelvärdet av tokenrepresentationerna med en attention-mask som utesluter utfyllnad och normaliserar sedan vektorn. Normaliserade skalärprodukter ger cosinuslikhet. Den 1024-dimensionella arrayen representerar en förberedd text. Behåll kopplingen mellan den exakta modellen, förberedelsen och de lagrade vektorerna så att senare frågor använder motsvarande representation.
Dessa vektorer kan ge kandidatrangordningar eller egenskaper till ett senare klustrings- eller klassificeringssteg. De översätter inte källan och skriver inte ett svar. Returnera den underliggande passagetexten när ett sökresultat ska stödja en läsare eller ett senare genereringssteg med RAG.
Träning och språktäckning
Modellkortet dokumenterar svagt övervakad kontrastiv förträning följd av övervakad finjustering. Den flerspråkiga förberedelsen omfattar material som titel–passage-par, konversationspar och översättningspar, medan märkta data för informationssökning och språkförståelse används i det senare steget. Detta förklarar de avsedda textrepresentationsuppgifterna utan att fastställa samma prestanda för alla språk.
Tillverkaren pekar uttryckligen ut försämring för språk med begränsade resurser som en begränsning. Kontrollera samlingens faktiska språk och ordalydelse, inklusive förkortningar, namn och specialiserat ordförråd. Beteckningen flerspråkig är en användbar beskrivning av omfattningen; den returnerade textens relevans måste fortfarande granskas för målgruppen och uppgiften.
Längd och användbara resultat
Långa indata kapas till högst 512 token. Förbered ett långt dokument som sammanhängande passager med rollprefixet och relevanta rubriker inkluderade. Bevara definitioner och förbehåll bredvid påståendet de påverkar och lagra en identifierare för det överordnade dokumentet samt källversionen utanför vektorn.
Tillverkaren rekommenderar att fokusera på den relativa ordningen mellan cosinuspoäng i stället för att behandla ett absolut värde som ett universellt konfidensmått. Ett användbart resultat är en uppsättning kandidatpassager, jämförbara textrepresentationer eller egenskaper kopplade till sina ursprungliga poster. Denna exakta modell förblir åtskild från E5 v2-checkpoints som enbart stöder engelska och från instruktionsfinjusterade E5-varianter, även när en annan modell också returnerar 1024 värden.
Ailoot Ultra · Embeddings POST /v1/embeddings intfloat/multilingual-e5-large
intfloat/multilingual-e5-large
intfloat/multilingual-e5-largeStart
intfloat Multilingual-E5-Large kodar flerspråkig text till 1024-dimensionella vektorer med en modell på 24 lager. Den stöder XLM-R:s omfattning på hundra språk, använder engelska query/passage-prefix för alla språk och kapar indata vid 512 token.
- Godkända indata
- Text · token_ids
- Resultat
- embedding
Tillgängligt i Ailoot · indata & metoder
Ailoot Ultra · Embeddings POST /v1/embeddings
- Indatatyper
text,token_ids- Utdatatyper
embedding- Kontext
- 512 tokens
- Utdataformat
- json
| Fält | Typ | Krav | Värden & gränser | Standard |
|---|---|---|---|---|
Fältmodel | Typstring | KravObligatoriskt | Värden & gränser intfloat/multilingual-e5-large | Standard— |
Fältinput | Typstring|string[]|integer[]|integer[][] | KravObligatoriskt | Värden & gränser Minsta antal objekt: 1 Villkor: En homogen batch som inte är tom. Token-ID:n är heltal som är större än eller lika med noll. Indatabudget: Maximum: 512 · Textenhet: UTF8-byte · Tokenenhet: element i en tokenarray | Standard— |
Fältencoding_format | Typstring | KravValfritt | Värden & gränser float | Standardfloat |
Fältdimensions | Typinteger | KravStöds inte | Värden & gränser Minimum: 1 | Standard— |
Fältuser | Typjson_value | KravValfritt | Värden & gränser Villkor: Källan tillåter detta JSON-metadatafält; den exakta innebörden hos leverantören beror på modellen. | Standard— |
Fältsession_id | Typjson_value | KravValfritt | Värden & gränser Villkor: Källan tillåter detta JSON-metadatafält; den exakta innebörden hos leverantören beror på modellen. | Standard— |
Fälttrace | Typjson_value | KravValfritt | Värden & gränser Villkor: Källan tillåter detta JSON-metadatafält; den exakta innebörden hos leverantören beror på modellen. | Standard— |
Fältprovider | Typobject | KravValfritt | Värden & gränser Villkor: provider.options avvisades | Standard— |
Kombinationer av indatamaterial
text_to_embedding
Metodparametrar och livscykel
| Parameter | Avtal |
|---|---|
Parametercontent_type | Avtalapplication/json |
Parameterrequired | Avtalmodel, input |
Parameterinput_shapes | Avtalstring, string[], nonnegative_integer_token_array, nonnegative_integer_token_array[] |
Parameterencoding_format | Avtalfloat |
Parameterdimensions_override | Avtalfalse |
Parametermax_input_budget_units | Avtal512 |
Parametermultimodal_objects | Avtalfalse |
Parametermaterial_types | Avtaltext, token_ids |
Livscykel: synchronous_json
Behåll varje vektorindex och dimension.
Att modellen har ett multimodalt namn innebär inte att bildobjekt tillåts på just denna anropsväg.
Priser
Tariffuppgifter lägger inte till begäransalternativ. Parametrar som stöds anges för den valda metoden.
- Snabbt läge
- Standardpris När snabbt läge är valt
- Flex-läge
- Standardpris När läget flex är valt
- Högsta resonemangsnivå
- Standardpris När den högsta resonemangsnivån använder standardjusteringen (default)
Ailoot-priser
Priser efter konfiguration
| Konfiguration | Prislista | Avgift |
|---|---|---|
| KonfigurationGrundpriser för token | PrislistaGrundpris | Avgift Indata · Indatatoken $0.00002 / 1K token Utdata · Utdatatoken $0 / 1K token Indata · Cacheläsning — / 1K token Indata · Skrivning till cache — / 1K token Indata · Skrivning till cache, 1 tim — / 1K token |
Ailoot reserverar ett uppskattat belopp före en begäran. Efter resultatet slutregleras avgiften utifrån uppmätt förbrukning. Slutreglering för strömning använder den slutliga förbrukningsposten. Så fungerar reservation och slutreglering →
Exempelbegäranden
Ailoot Ultra · Embeddings
set -eu
: "${AILOOT_API_KEY:?Set your Ailoot API key}"
python3 - <<'PY_REQUEST'
import json,os
from pathlib import Path
p=json.loads('{"model": "intfloat/multilingual-e5-large", "input": ["First document", "Second document"]}')
Path("request.json").write_text(json.dumps(p,ensure_ascii=False))
PY_REQUEST
curl --fail-with-body --silent --show-error https://api.ailoot.ai/v1/embeddings \
-H "Authorization: Bearer $AILOOT_API_KEY" -H 'Content-Type: application/json' \
--data-binary @request.json -D response-headers.txt -o result.json
python3 - <<'PY_RESULT'
import json
from pathlib import Path
r=json.loads(Path("result.json").read_text())
for x in r.get("data",[]): print(json.dumps({"index":x.get("index"),"embedding":x.get("embedding")}))
PY_RESULT
from openai import OpenAI
import os
client=OpenAI(base_url="https://api.ailoot.ai/v1",api_key=os.environ["AILOOT_API_KEY"],max_retries=0)
result=client.embeddings.create(model='intfloat/multilingual-e5-large',input=["First document","Second document"])
print(result)
for item in result.data:print(item.index,item.embedding)
Ta emot och spara resultat
Ailoot Ultra · Embeddings
json
Behåll alla färdiga resultat
Behåll varje fullständigt returnerat svar, fil och innehållsdel.
Behåll varje vektor tillsammans med dess index. Antalet vektorer måste vara lika med antalet indataobjekt; dimensionerna måste vara konsekventa.
Om det ursprungliga svaret behöver kontrolleras
Ingen endpoint för inbäddningsjobb införs.
Svarsfält
| Fält | Typ |
|---|---|
Fältobject | Typstring |
Fältmodel | Typstring |
Fältdata[].index | Typinteger |
Fältdata[].embedding | Typfinite float[] |
Fältusage | Typobject |
Fel och nästa steg
| Svar | Villkor | Nästa steg |
|---|---|---|
Svar400 · invalid_request_error | VillkorOgiltiga obligatoriska fält, ogiltig representation av underlaget eller ogiltigt parametervärde | Nästa stegKorrigera de angivna fälten före en ny begäran om att skapa. |
Alias
Modellalias
Ailoot Ultra intfloat/multilingual-e5-large
Alias för metodsökvägar
Använd metodsökvägarna som visas ovan.
Relaterade anropar-ID:n
FAQ · Intfloat: Multilingual-E5-Large
- Vilka indata och resultat finns?
POST /v1/embeddings·intfloat/multilingual-e5-large:text,token_ids→embedding- Vilka fält använder begäran?
POST /v1/embeddings·intfloat/multilingual-e5-large:model,input,encoding_format,provider- Vilka gränser gäller?
POST /v1/embeddings·intfloat/multilingual-e5-large:ctx:512;input.budget.maximum:512(UTF8-byte);input.min_items:1