Respan: Span-01 Lite

O Span-01 Lite é um perfil de modelo com nome próprio na família de pontuação de comportamentos Span-01 da Respan. O guia de início rápido e a tabela de modelos do produtor identificam o Lite como um dos dois perfis que utilizam o mesmo fluxo de pontuação. Recebe uma interação de texto e definições de comportamentos em linguagem simples e, em seguida, devolve três probabilidades para cada definição: presente, ausente e não observável. A saída útil do perfil é um registo de comportamento com incerteza explícita, e não uma resposta escrita à conversa.

Escolha a observação e os seus limites

Defina o comportamento com as palavras que correspondem à sua tarefa. Numa verificação de transferência para um humano, especifique se isso significa que o utilizador pede explicitamente uma pessoa, que o assistente diz que é necessária uma transferência, ou qualquer uma das duas condições. Se a simples desilusão não deve contar, diga-o. Numa verificação de pedido de desculpa, defina que formulação constitui um pedido de desculpa, em vez de depender de uma etiqueta pouco clara. Cada definição tem um identificador que o avaliador devolve com as respetivas probabilidades.

O conjunto de comportamentos pertence a quem faz a chamada. Exemplos como frustração, promessas sem fundamento, utilização indevida de ferramentas ou ações repetitivas do agente são definições a fornecer, e não uma lista fixa de categorias nativas. Mantenha cada definição observável na interação fornecida. Um segmento curto pode determinar se o assistente pediu desculpa sem conter evidência de que um problema externo foi efetivamente resolvido.

Prepare o segmento de conversa

A entrada documentada da Respan coloca as mensagens anteriores em span.input e o turno a avaliar em span.output. O conteúdo de cada mensagem é uma cadeia de caracteres. Preserve o contexto necessário para compreender o turno, incluindo os papéis dos interlocutores, o pedido relevante do utilizador e qualquer evidência textual que o assistente tenha utilizado. Numa verificação de qualidade, forneça o turno real e não uma paráfrase que elimine o comportamento em avaliação.

Uma revisão ilustrativa pode partir de uma mensagem do utilizador que descreve problemas repetidos e de uma resposta do assistente que se oferece para investigar. Defina a frustração do utilizador e uma promessa do assistente como observações separadas. Se o resultado de uma ferramenta for importante para avaliar se uma afirmação tinha fundamento, mantenha o texto relevante desse resultado no contexto. A saída é uma avaliação dessas definições no segmento fornecido; o modelo não realiza a investigação prometida nem altera a própria conversa.

Presente, ausente e não observável

A resposta de pontuação contém o id do comportamento com p_present, p_absent e p_not_observable, cuja soma é aproximadamente 1. Não observável significa que o rasto não consegue responder à pergunta. É diferente de ausente. Para uma definição como a aceitação de uma solução pelo cliente, um segmento que termina antes de o cliente reagir é evidência incompleta, mesmo que a resposta do assistente pareça confiante.

Mantenha os três valores ao preparar um resultado para revisão. Uma categoria escolhida pelo valor mais alto pode ser útil para apresentação, mas a distribuição conserva o grau de incerteza da observação. Não utilize apenas um valor de presença baixo para concluir que o comportamento definitivamente não ocorreu. Quando predomina a falta de evidência, a ação útil pode ser obter o contexto relevante ou manter o resultado como desconhecido, em vez de inventar uma explicação.

Várias definições sobre a mesma evidência

O fluxo de pontuação do produtor avalia várias definições de comportamento em conjunto sobre um único rasto e devolve um resultado para cada identificador, pela ordem do pedido. A documentação não especifica um limite para o número de comportamentos por pedido. Isto não estabelece uma janela de tokens universal nem um tamanho de rasto ilimitado. Mantenha as definições com um propósito claro e a evidência relevante, e conserve a associação entre cada resultado devolvido e a definição que o produziu.

Os resultados dos comportamentos são observações independentes, e não uma resposta única de escolha exclusiva. Frustração, um pedido de desculpa e uma proposta de transferência podem estar todos presentes na mesma troca. As respetivas distribuições de três valores têm significado dentro de cada definição; somar valores de presença de comportamentos diferentes não cria uma distribuição normalizada de categorias nem uma pontuação ordenada numa rubrica.

Mantenha o perfil selecionado junto dos resultados

O fabricante documenta a edição Lite e a edição padrão com um formato de pedido e de resultado comum. Esse contrato permite preparar rastos e interpretar probabilidades de comportamento para qualquer um dos dois perfis nomeados. Não estabelece que o Lite tenha os mesmos pesos, o mesmo número de parâmetros ou a mesma qualidade que a outra edição. Mantenha o perfil selecionado identificável ao rever os seus resultados, em vez de trocar silenciosamente resultados de edições diferentes.

Utilize conversas etiquetadas da tarefa pretendida para escolher limiares de registo, encaminhamento ou revisão. Conserve para inspeção os resultados com valor elevado de não observável e as observações limítrofes, e compare qualquer erro aparente com o turno original e a definição do comportamento. O artefacto final útil contém o identificador do segmento de texto, a definição, o perfil selecionado e o resultado completo de probabilidades de três valores. Um passo posterior da aplicação decide o que fazer com essa observação; a saída de pontuação do Lite não executa, por si só, uma transferência, não bloqueia uma resposta nem gera uma correção.