BAAI: bge-base-en-v1.5

bge-base-en-v1.5 ist das dichte englische Embedding-Modell von BAAI in Basisgröße. Es wandelt jeden Text in eine 768-dimensionale numerische Repräsentation für Informationssuche und semantische Vergleiche um. Das Modell gehört zur BGE-v1.5-Reihe, die die Verteilung der Ähnlichkeitswerte der früheren Familie überarbeitet und die Suche ohne mitgelieferte Instruktion verbessert. Seine Ausgabe ist ein Vektor zum Vergleich von Texten oder zum Auffinden relevanter Passagen.

Suchanfragen und Passagen vorbereiten

Für eine kurze Anfrage, die längere Passagen durchsucht, empfiehlt BAAI das Präfix „Represent this sentence for searching relevant passages:“. Die Korpuspassagen erhalten diese Instruktion nicht. Für andere Aufgaben kann der Originaltext direkt eingebettet werden. Der Hersteller weist darauf hin, dass v1.5 auch ohne Instruktion funktioniert; die Vorbereitung sollte daher aufgabenbezogen gewählt werden, statt das Präfix als einzig gültige Eingabe zu behandeln.

Eine praktische Suchsammlung kann Hilfeartikel, Produkterklärungen oder technische Anweisungen enthalten. Eine Anfrage wie „Wie ändere ich das Exportformat?“ sollte die Passage abrufen, die diese Handlung beschreibt. Halten Sie die Abschnittsüberschrift, relevante Bedingungen und den tatsächlichen Quelltext zusammen. Speichern Sie die Kennung und Fundstelle der Passage bei ihrem Vektor, damit ein Suchergebnis lesbaren Inhalt zurückgeben kann, den eine spätere Antwortstufe auch zitieren kann.

Vektorformat und Vergleich

Die dokumentierte Repräsentation verwendet den letzten verborgenen Zustand des ersten Tokens, des CLS-Tokens, als Satz-Embedding. Die Beispiele des Herstellers normalisieren den Vektor und vergleichen normalisierte Embeddings mit einem Skalarprodukt, das der Kosinusähnlichkeit entspricht. Die 768 Dimensionen sind die Größe der Ausgaberepräsentation dieses Modells; sie sind weder eine wählbare Kontextlänge noch ein Kontingent für Textgenerierung.

Verwenden Sie für die verglichenen Anfrage- und Korpusvektoren dasselbe Modell und dieselbe Vorbereitungskonvention. Eine praktische Prüfung besteht darin, für eine kleine Menge tatsächlicher Nutzerfragen bekannte antwortrelevante Passagen abzurufen und den zurückgegebenen Text zu untersuchen. Eine kompatible Vektorform ermöglicht dem Index die Speicherung der Repräsentation, während die Quellpassage belegt, was das Ergebnis tatsächlich aussagt.

Eingabelänge und Dokumentvorbereitung

Die dokumentierte Sequenzlänge des Modells beträgt 512 Tokens. Eine lange Quelle sollte deshalb vor der Embedding-Berechnung in zusammenhängende, antwortrelevante Passagen aufgeteilt werden. Bewahren Sie Definitionen und Ausnahmen bei der Aussage, auf die sie sich beziehen, und erhalten Sie die Verbindung von einer Passage zu ihrem übergeordneten Dokument. Der einzubettende Text umfasst jede ergänzte Instruktion und Überschrift; eine kompakte Vorbereitung lässt daher mehr Platz für den nützlichen Quellinhalt.

Wählen Sie bei einem Bericht oder Handbuch Grenzen um einen Abschnitt oder eine kleine Gruppe zusammengehöriger Absätze. Eine Passage, die nur einen Titel oder ein Fragment ohne dessen Gegenstand enthält, kann nach dem Abruf schwer verständlich sein. Bewahren Sie den Originaltext und eine Quellversion auf, damit eine Indexaktualisierung bei Dokumentänderungen das zugehörige Material ersetzen kann.

Bewertungen und nützliche Ausgabe

BAAI warnt davor, absolute Ähnlichkeitswerte als universelle Schwellenwerte dafür zu verwenden, ob zwei Texte dasselbe bedeuten. Entscheidend ist die relative Rangfolge, und ein Filterschwellenwert sollte anhand der Verteilung in den eigenen Aufgabendaten gewählt werden. Eine hohe Vektorähnlichkeit ist ein Suchsignal und keine Verifizierung des sachlichen Inhalts der Passage.

Das nützliche Ergebnis ist ein englischer Passagenindex, eine Menge von Anfragevektoren oder numerische Merkmale für semantische Vergleiche. Ein separater Reranker kann abgerufene Kandidaten verfeinern, und eine separate Generierungsstufe kann aus deren Text eine Antwort verfassen. Dieses konkrete englische Basismodell v1.5 bleibt von BGE Large, chinesischen Ausgaben sowie den mehrsprachigen und hybriden Retrieval-Profilen von BGE-M3 getrennt.