Mistral: Mistral Embed 2312

Mistral Embed 2312 é o modelo de embeddings de texto da Mistral AI para representar numericamente o significado. Aceita uma cadeia de texto ou uma lista de cadeias e devolve um embedding para cada entrada. O resultado é um vetor utilizado pela aplicação para similaridade, recuperação, classificação ou agrupamento, em vez de uma explicação de conversação. A página fixa do modelo do fabricante identifica mistral-embed-2312.

Entrada, contexto e formato do vetor

A página exata do modelo documenta uma designação de contexto de 8k. Prepare cada elemento de texto dentro da capacidade de entrada aplicável e mantenha a identidade do elemento com o respetivo vetor. Um documento de origem longo pode ser dividido em passagens úteis, conservando o título do documento, a secção e a localização da fonte necessários para devolver o material correto mais tarde.

O guia Mistral Embed do fabricante especifica 1024 dimensões para cada embedding de texto, independentemente do comprimento visível da entrada. Uma pergunta curta e uma passagem mais longa têm, por isso, o mesmo formato vetorial, embora o conteúdo e as contagens de tokens sejam diferentes. Esta é uma dimensão da representação de saída, não um orçamento de tokens de resposta nem uma medida de quantas palavras da fonte são conservadas.

A resposta documentada inclui os embeddings e informação de utilização de tokens; o exemplo do endpoint associa cada vetor a um índice de entrada. Preserve essa associação ao processar vários textos. A aplicação precisa do texto original e dos seus identificadores, além do resultado numérico, para apresentar um resultado de pesquisa útil ou fornecer material de origem a uma etapa posterior.

Similaridade semântica

O guia explica que textos relacionados tendem a estar próximos no espaço de embeddings. Isto permite encontrar passagens que utilizam palavras diferentes para expressar o mesmo tema ou requisito. Uma consulta ilustrativa a uma base de conhecimento pode perguntar como recuperar o acesso, enquanto o procedimento relevante utiliza uma expressão diferente para a mesma operação. A aplicação pode comparar o vetor da consulta com os vetores das passagens armazenadas, em vez de depender apenas da correspondência exata de palavras.

Os exemplos do fabricante utilizam embeddings normalizados com norma unitária. Para esses vetores, a similaridade do cosseno, o produto escalar e a distância euclidiana produzem ordenações de similaridade consistentes, embora os seus valores numéricos não sejam idênticos. Escolha um método de comparação adequado e aplique-o de forma consistente às representações de consultas e documentos.

A similaridade não prova que duas afirmações sejam intercambiáveis. Conserve o texto de origem e examine a condição, a data ou o identificador que importa para a pergunta. Duas passagens podem dizer respeito ao mesmo assunto, mas descrever procedimentos ou exceções diferentes. O embedding fornece um sinal de recuperação; interpretar a passagem selecionada é uma parte separada da tarefa.

Recuperação e respostas baseadas em fontes

Um fluxo documental prático prepara vetores para passagens da base de conhecimento, armazena os seus identificadores e texto original e, depois, compara uma nova pergunta com essa coleção. Devolva as passagens relevantes com as suas localizações de origem. A aplicação pode apresentar essas passagens diretamente ou fornecê-las a um modelo de geração de texto que redige uma resposta fundamentada no material recuperado.

Para um resultado de pesquisa útil, conserve o título do documento, a secção, a passagem e o identificador utilizado para a encontrar. Um assistente de suporte pode então recuperar o procedimento relevante para a pergunta de um utilizador e passá-lo à etapa de redação da resposta. Mistral Embed realiza a etapa de representação numérica; não redige, por si só, a explicação final nem executa uma ação externa.

Outras utilizações documentadas

O fabricante também enumera deteção de paráfrases, classificação, agrupamento e processamento em lotes entre os fluxos de embeddings. Uma tarefa de comparação pode recuperar passagens com significado relacionado para revisão. Um fluxo de classificação pode comparar uma entrada com exemplos etiquetados ou utilizar os vetores como características para um classificador separado. Um fluxo de agrupamento pode reunir elementos semelhantes para uma descrição posterior por uma pessoa ou ao nível da aplicação.

Defina o propósito da representação antes de preparar os dados. Uma passagem utilizada para pesquisa semântica deve preservar a informação de que alguém precisará após a recuperação; um exemplo de classificação deve incluir a formulação que distingue a classe. Mantenha a preparação consistente, para que uma consulta e um elemento armazenado representem material comparável.

Limites de edição e de saída

Utilize a mesma edição do modelo e uma representação compatível para os documentos e as respetivas consultas. Um vetor com o mesmo número de coordenadas proveniente de outro modelo não pertence automaticamente ao mesmo espaço semântico. Substituir o modelo ou a representação exige que os elementos armazenados e as consultas permaneçam alinhados.

Esta entrada descreve entrada de texto e saída de vetores numéricos, com o contexto de 8k do fabricante e a representação documentada de 1024 dimensões de Mistral Embed. As dimensões configuráveis e os formatos quantizados de Codestral Embed pertencem a esse modelo de código com nome separado e não devem ser assumidos aqui. Imagens, áudio, prosa gerada e execução de ferramentas são capacidades separadas, fora deste resultado de embeddings de texto.