Mistral: Mistral Embed 2312

Mistral Embed 2312 ist das Text-Embedding-Modell von Mistral AI, das Bedeutung numerisch darstellt. Es nimmt eine Textzeichenkette oder eine Liste von Zeichenketten entgegen und gibt für jede Eingabe ein Embedding zurück. Das Ergebnis ist ein Vektor, den die Anwendung für Ähnlichkeit, Abruf, Klassifizierung oder Clustering verwendet, keine Erklärung im Gesprächsstil. Die feste Modellseite des Herstellers nennt mistral-embed-2312.

Eingabe, Kontext und Vektorform

Die Seite des genauen Modells dokumentiert eine Kontextangabe von 8k. Bereiten Sie jedes Textelement innerhalb der geltenden Eingabekapazität vor und halten Sie die Identität des Elements mit seinem Vektor zusammen. Ein langes Quelldokument lässt sich in nützliche Passagen aufteilen, wobei Dokumenttitel, Abschnitt und Fundstelle erhalten bleiben, die später für die Rückgabe des richtigen Materials nötig sind.

Der Mistral-Embed-Leitfaden des Herstellers gibt für jedes Text-Embedding 1’024 Dimensionen an, unabhängig von der sichtbaren Länge der Eingabe. Eine kurze Frage und eine längere Passage haben daher dieselbe Vektorform, obwohl sich Inhalt und Token-Anzahl unterscheiden. Dies ist eine Dimension der Ausgaberepräsentation, kein Token-Budget für Antworten und kein Mass dafür, wie viele Wörter der Quelle erhalten bleiben.

Die dokumentierte Antwort enthält die Embeddings und Angaben zur Token-Nutzung; das Endpoint-Beispiel ordnet jeden Vektor einem Eingabeindex zu. Behalten Sie diese Zuordnung bei, wenn Sie mehrere Texte verarbeiten. Die Anwendung benötigt neben dem numerischen Ergebnis auch den Originaltext und seine Kennungen, um einen nützlichen Suchtreffer anzuzeigen oder Quellmaterial an einen späteren Schritt zu übergeben.

Semantische Ähnlichkeit

Der Leitfaden erklärt, dass verwandte Texte im Embedding-Raum tendenziell nahe beieinanderliegen. Das hilft, Passagen zu finden, die dasselbe Thema oder dieselbe Anforderung mit anderen Worten ausdrücken. Eine beispielhafte Anfrage an eine Wissensdatenbank könnte etwa lauten, wie man wieder Zugang erhält, während das relevante Verfahren eine andere Formulierung für denselben Vorgang verwendet. Die Anwendung kann den Vektor der Anfrage mit gespeicherten Passagenvektoren vergleichen, statt sich nur auf exakte Wortübereinstimmungen zu verlassen.

Die Beispiele des Herstellers verwenden auf Einheitslänge normalisierte Embeddings. Bei solchen Vektoren ergeben Kosinus-Ähnlichkeit, Skalarprodukt und euklidischer Abstand übereinstimmende Ähnlichkeitsrangfolgen, auch wenn ihre Zahlenwerte nicht identisch sind. Wählen Sie eine geeignete Vergleichsmethode und wenden Sie sie einheitlich auf die Repräsentationen von Anfragen und Dokumenten an.

Ähnlichkeit ist kein Beweis dafür, dass zwei Aussagen austauschbar sind. Bewahren Sie den Quelltext auf und prüfen Sie die Bedingung, das Datum oder die Kennung, auf die es bei der Frage ankommt. Zwei Passagen können dasselbe Thema betreffen und dennoch unterschiedliche Verfahren oder Ausnahmen beschreiben. Das Embedding liefert ein Abrufsignal; die Interpretation der ausgewählten Passage ist ein eigener Teil der Aufgabe.

Abruf und quellenbasierte Antworten

Ein praktischer Dokumenten-Workflow erzeugt Vektoren für Passagen der Wissensdatenbank, speichert ihre Kennungen und den Originaltext und vergleicht dann eine neue Frage mit dieser Sammlung. Geben Sie die relevanten Passagen mit ihren Fundstellen zurück. Die Anwendung kann diese Passagen direkt anzeigen oder an ein Textgenerierungsmodell übergeben, das eine auf dem abgerufenen Material beruhende Antwort verfasst.

Für ein nützliches Suchergebnis sollten Dokumenttitel, Abschnitt, Passage und die zum Auffinden verwendete Kennung erhalten bleiben. Ein Support-Assistent kann dann das zur Frage eines Nutzers passende Verfahren abrufen und es an die Stufe übergeben, die die Antwort formuliert. Mistral Embed übernimmt den Schritt der numerischen Repräsentation; es verfasst selbst nicht die endgültige Erklärung und führt keine externe Aktion aus.

Weitere dokumentierte Einsatzzwecke

Der Hersteller nennt ausserdem Paraphrasenerkennung, Klassifizierung, Clustering und Batch-Verarbeitung als Embedding-Workflows. Eine Vergleichsaufgabe kann Passagen mit verwandter Bedeutung zur Prüfung abrufen. Ein Klassifizierungs-Workflow kann eine Eingabe mit gelabelten Beispielen vergleichen oder die Vektoren als Merkmale für einen separaten Klassifikator verwenden. Ein Clustering-Workflow kann ähnliche Elemente für eine spätere Beschreibung durch Menschen oder auf Anwendungsebene gruppieren.

Legen Sie den Zweck der Repräsentation fest, bevor Sie die Daten vorbereiten. Eine Passage für die semantische Suche sollte die Informationen enthalten, die nach dem Abruf benötigt werden; ein Klassifizierungsbeispiel sollte die Formulierung enthalten, die die Klasse unterscheidet. Halten Sie die Vorbereitung einheitlich, damit Anfrage und gespeichertes Element vergleichbares Material repräsentieren.

Editions- und Ausgabegrenzen

Verwenden Sie für die Dokumente und ihre Anfragen dieselbe Modelledition und eine kompatible Repräsentation. Ein Vektor mit derselben Anzahl an Koordinaten aus einem anderen Modell liegt nicht automatisch im selben semantischen Raum. Wird das Modell oder die Repräsentation ersetzt, müssen gespeicherte Elemente und Anfragen aufeinander abgestimmt bleiben.

Dieser Eintrag beschreibt Texteingabe und numerische Vektorausgabe mit dem vom Hersteller angegebenen Kontext von 8k und der für Mistral Embed dokumentierten Repräsentation mit 1’024 Dimensionen. Die konfigurierbaren Dimensionen und quantisierten Formate von Codestral Embed gehören zu diesem separat benannten Codemodell und sind hier nicht vorauszusetzen. Bilder, Audio, generierter Fliesstext und Tool-Ausführung sind eigenständige Fähigkeiten ausserhalb dieses Text-Embedding-Ergebnisses.