Mistral: Mistral Embed 2312

Mistral Embed 2312 è il modello di embedding testuale di Mistral AI per rappresentare numericamente il significato. Accetta una stringa di testo o un elenco di stringhe e restituisce un embedding per ogni input. Il risultato è un vettore usato dall’applicazione per similarità, recupero, classificazione o clustering anziché una spiegazione conversazionale. La pagina fissa del modello presso il produttore identifica mistral-embed-2312.

Input, contesto e forma del vettore

La pagina esatta del modello documenta un’indicazione di contesto di 8k. Prepara ogni elemento testuale entro la capacità di input applicabile e mantieni l’identità dell’elemento insieme al suo vettore. Un documento di origine lungo può essere suddiviso in passaggi utili, conservando titolo del documento, sezione e posizione nella fonte necessari per restituire in seguito il materiale corretto.

La guida Mistral Embed del produttore specifica 1024 dimensioni per ogni embedding testuale, indipendentemente dalla lunghezza visibile dell’input. Una domanda breve e un passaggio più lungo hanno quindi la stessa forma vettoriale anche se contenuto e conteggio di token differiscono. È una dimensione della rappresentazione di output, non un budget di token di risposta né una misura di quante parole della fonte vengono conservate.

La risposta documentata include gli embedding e le informazioni sull’uso dei token; l’esempio dell’endpoint associa ogni vettore a un indice di input. Preserva questa associazione quando elabori più testi. L’applicazione ha bisogno del testo originale e dei suoi identificatori, oltre al risultato numerico, per mostrare un risultato di ricerca utile o fornire materiale di origine a una fase successiva.

Similarità semantica

La guida spiega che testi correlati tendono a essere vicini nello spazio di embedding. Ciò supporta la ricerca di passaggi che usano parole diverse per esprimere lo stesso argomento o requisito. Una query illustrativa in una base di conoscenze potrebbe chiedere come recuperare l’accesso, mentre la procedura pertinente usa un’espressione diversa per la stessa operazione. L’applicazione può confrontare il vettore della query con vettori di passaggi memorizzati anziché affidarsi soltanto alla corrispondenza esatta delle parole.

Gli esempi del produttore usano embedding normalizzati a norma unitaria. Per tali vettori, similarità del coseno, prodotto scalare e distanza euclidea danno ordinamenti di similarità coerenti, anche se i loro valori numerici non sono identici. Scegli un metodo di confronto adatto e applicalo in modo coerente alle rappresentazioni di query e documenti.

La similarità non è prova che due affermazioni siano intercambiabili. Conserva il testo di origine ed esamina la condizione, la data o l’identificatore rilevanti per la domanda. Due passaggi possono riguardare lo stesso argomento descrivendo procedure o eccezioni differenti. L’embedding fornisce un segnale di recupero; interpretare il passaggio selezionato è una parte distinta dell’attività.

Recupero e risposte basate sulle fonti

Un flusso documentale concreto prepara vettori per passaggi di una base di conoscenze, memorizza i loro identificatori e il testo originale, quindi confronta una nuova domanda con quella raccolta. Restituisci i passaggi pertinenti con le posizioni nelle fonti. L’applicazione può mostrare direttamente quei passaggi o fornirli a un modello di generazione testuale che scrive una risposta basata sul materiale recuperato.

Per un risultato di ricerca utile, conserva il titolo del documento, la sezione, il passaggio e l’identificatore usato per trovarlo. Un assistente di supporto può quindi recuperare la procedura pertinente alla domanda di un utente e passarla alla fase di scrittura della risposta. Mistral Embed esegue il passaggio di rappresentazione numerica; non redige direttamente la spiegazione finale e non esegue un’azione esterna.

Altri usi documentati

Il produttore elenca inoltre rilevamento di parafrasi, classificazione, clustering ed elaborazione in batch tra i flussi di embedding. Un’attività di confronto può recuperare passaggi con significato correlato per la verifica. Un flusso di classificazione può confrontare un input con esempi etichettati o usare i vettori come caratteristiche per un classificatore separato. Un flusso di clustering può raggruppare elementi simili per una successiva descrizione da parte di una persona o dell’applicazione.

Definisci lo scopo della rappresentazione prima di preparare i dati. Un passaggio usato per ricerca semantica dovrebbe preservare le informazioni necessarie dopo il recupero; un esempio di classificazione dovrebbe includere la formulazione che distingue la classe. Mantieni coerente la preparazione, affinché una query e un elemento memorizzato rappresentino materiale confrontabile.

Confini dell’edizione e dell’output

Usa la stessa edizione del modello e una rappresentazione compatibile per documenti e query. Un vettore con lo stesso numero di coordinate proveniente da un modello diverso non si trova automaticamente nello stesso spazio semantico. Sostituire il modello o la rappresentazione richiede che gli elementi memorizzati e le query rimangano allineati.

Questa voce descrive input testuale e output vettoriale numerico, con il contesto di 8k del produttore e la rappresentazione a 1024 dimensioni documentata per Mistral Embed. Le dimensioni configurabili e i formati quantizzati di Codestral Embed appartengono a quel modello di codice denominato separatamente e non devono essere presunti qui. Immagini, audio, testo generato ed esecuzione di strumenti sono capacità separate, esterne a questo risultato di embedding testuale.