Qwen: Qwen3 Embedding 8B

Qwen3-Embedding-8B es el modelo de embeddings de texto 8B de Qwen, construido sobre el modelo base denso Qwen3. Representa el texto como vectores numéricos, en lugar de generar respuestas conversacionales. Qwen enumera recuperación de texto, recuperación de código, clasificación, agrupamiento y minería de textos paralelos entre las aplicaciones compatibles. Un sistema de búsqueda puede utilizar estos vectores para comparar una pregunta con pasajes pertinentes; una colección documental puede encontrar material relacionado semánticamente u organizar registros en grupos.

El modelo exacto admite una longitud de secuencia de 32K tokens y embeddings de hasta 4,096 dimensiones. También admite dimensiones de salida definidas por el usuario de 32 a 4,096 mediante Matryoshka Representation Learning. Esto convierte la longitud del vector en una decisión de diseño deliberada: un vector más corto cambia el tamaño de la representación y la salida completa conserva la dimensionalidad máxima del modelo. Mantén la dimensión elegida consistente para los documentos y las consultas comparados en un índice. Qwen3-Embedding-4B es una edición independiente con otra dimensión máxima, no una fuente de vectores intercambiable para una colección 8B existente.

El productor describe compatibilidad con más de 100 idiomas, incluidos lenguajes de programación, y recuperación multilingüe, entre idiomas y de código. Una colección práctica puede contener documentos en varias lenguas mientras las consultas buscan el significado pertinente, o pasajes de código de origen indexados para una pregunta en lenguaje natural. Conserva identificadores, títulos y términos del dominio importantes en la entrada. Para código, mantén la explicación circundante de la función o módulo con el fragmento cuando forme parte de la pregunta. La salida sigue siendo una representación vectorial; devolver el texto documental coincidente es el siguiente paso de la aplicación de búsqueda.

El modelo tiene en cuenta las instrucciones. Qwen recomienda una instrucción de una frase adaptada a la tarea de recuperación y, para uso multilingüe, recomienda escribirla en inglés. Su ejemplo directo formatea una consulta con Instruct: seguido de la descripción de la tarea y Query: seguido de la pregunta. Los documentos de recuperación no necesitan el mismo prefijo de instrucción en ese ejemplo. Un encargo original adecuado puede describir la búsqueda de pasajes técnicos que expliquen un error del usuario y colocar después la descripción concreta del error en la consulta. La instrucción describe el tipo de relación semántica que debería favorecer la búsqueda.

Los ejemplos de Qwen codifican consultas y documentos por separado, comparan sus vectores mediante similitud coseno y muestran un procedimiento de menor nivel que toma el estado oculto del último token y normaliza el embedding antes de comparar mediante producto escalar. Un flujo útil conserva el vector de cada pasaje asociado a su identificador de origen, compara una consulta preparada con los vectores almacenados y devuelve los pasajes correspondientes en orden de similitud. El ajuste de truncamiento de 8,192 tokens del ejemplo es una elección de procesamiento de entrada, distinta de la longitud de secuencia 32K documentada del modelo. Revisa qué se conserva al preparar entradas largas.

Los modelos de embeddings y reordenación son componentes distintos de la versión de Qwen. Un modelo de embeddings representa un segmento textual y permite una búsqueda inicial por similitud. Un modelo de reordenación independiente evalúa la relación entre una consulta y los pasajes candidatos y puede refinar su orden. Qwen describe combinar ambos módulos, pero Qwen3-Embedding-8B devuelve embeddings, no el juicio de relevancia de un modelo de reordenación ni una respuesta escrita. Para recuperación seguida de respuesta, conserva el texto de origen coincidente y aporta esa evidencia a la etapa de respuesta. Elige y mantén modelo, dimensión e instrucción de consulta consistentes para la colección buscada.