O Amazon Titan Text Embeddings V2 converte texto numa representação numérica para pesquisa e outras tarefas baseadas na proximidade de significados. O modelo está otimizado para recuperar excertos relevantes: o utilizador faz uma pergunta pelas suas próprias palavras e a aplicação compara o respetivo vetor com os vetores dos materiais da base de conhecimento. Assim, é possível encontrar informação sem uma correspondência exata entre palavras-chave.
O V2 distingue-se do G1 por uma representação padrão mais compacta: na documentação da Amazon, a dimensão predefinida do vetor é de 1 024 dimensões. Para a aplicação, esta é uma característica dos dados que armazena e compara. Todos os registos do mesmo índice devem utilizar uma forma de representação coerente; ao mudar de outro modelo de embeddings, é necessário preparar novamente o índice para o modelo escolhido.
A Amazon indica treino do V2 em mais de 100 línguas naturais e 13 linguagens de programação, incluindo Python, JavaScript, Java, C++, Rust, Go e SQL. Ainda assim, o modelo está otimizado sobretudo para texto em inglês. Numa base multilingue, é especialmente útil verificar separadamente consultas em que o idioma da pergunta difere do idioma dos documentos: a presença de idiomas no treino não assegura qualidade igual para todas essas combinações.
A entrada é texto e a saída é um embedding. O limite desta ficha é de 8 192 tokens de entrada. Para um índice de pesquisa, é conveniente dividir materiais longos por fronteiras de significado: títulos, secções e parágrafos. Cada excerto pode depois ser guardado junto do respetivo vetor e de uma referência à fonte original.
Escolha perguntas reais e respostas relevantes da sua coleção, crie os embeddings e verifique os resultados da pesquisa. Altere a extensão dos excertos e o método de comparação sobre o mesmo conjunto, conservando a ligação ao texto original. O Titan prepara representações numéricas; a comparação, a seleção dos resultados e a elaboração da resposta são executadas pelas etapas seguintes da aplicação. Esta verificação ajuda a escolher as definições do índice para a sua terminologia e a estrutura dos documentos.
", "aboutText": "### Segunda geração de embeddings de texto do Titan\n\nO Amazon Titan Text Embeddings V2 converte texto numa representação numérica para pesquisa e outras tarefas baseadas na proximidade de significados. O modelo está otimizado para recuperar excertos relevantes: o utilizador faz uma pergunta pelas suas próprias palavras e a aplicação compara o respetivo vetor com os vetores dos materiais da base de conhecimento. Assim, é possível encontrar informação sem uma correspondência exata entre palavras-chave.\n\nO V2 distingue-se do G1 por uma representação padrão mais compacta: na documentação da Amazon, a dimensão predefinida do vetor é de **1 024 dimensões**. Para a aplicação, esta é uma característica dos dados que armazena e compara. Todos os registos do mesmo índice devem utilizar uma forma de representação coerente; ao mudar de outro modelo de embeddings, é necessário preparar novamente o índice para o modelo escolhido.\n\n### Onde utilizar\n\n- **RAG e pesquisa empresarial:** preparar vetores das secções da documentação e depois recuperar excertos para outro modelo que responda à pergunta.\n- **Semelhança semântica:** comparar textos com formulações diferentes e encontrar materiais próximos.\n- **Agrupamento:** explorar os temas de pedidos, avaliações e documentos através da proximidade das suas representações.\n- **Pesquisa em código:** construir cenários de pesquisa para código-fonte e explicações relacionadas.\n\nA Amazon indica treino do V2 em mais de 100 línguas naturais e 13 linguagens de programação, incluindo Python, JavaScript, Java, C++, Rust, Go e SQL. Ainda assim, o modelo está otimizado sobretudo para texto em inglês. Numa base multilingue, é especialmente útil verificar separadamente consultas em que o idioma da pergunta difere do idioma dos documentos: a presença de idiomas no treino não assegura qualidade igual para todas essas combinações.\n\n### Utilização na Ailoot\n\nA entrada é texto e a saída é um **embedding**. O limite desta ficha é de **8 192 tokens de entrada**. Para um índice de pesquisa, é conveniente dividir materiais longos por fronteiras de significado: títulos, secções e parágrafos. Cada excerto pode depois ser guardado junto do respetivo vetor e de uma referência à fonte original.\n\n### Ciclo prático\n\nEscolha perguntas reais e respostas relevantes da sua coleção, crie os embeddings e verifique os resultados da pesquisa. Altere a extensão dos excertos e o método de comparação sobre o mesmo conjunto, conservando a ligação ao texto original. O Titan prepara representações numéricas; a comparação, a seleção dos resultados e a elaboração da resposta são executadas pelas etapas seguintes da aplicação. Esta verificação ajuda a escolher as definições do índice para a sua terminologia e a estrutura dos documentos.", "locale": "pt-pt", "methods": [ { "html": "POST /v1/embeddingstextembedding