Respan: Span-01 Lite

Span-01 Lite è un profilo di modello con nome distinto all'interno della famiglia Span-01 di Respan per l'assegnazione di punteggi ai comportamenti. La guida rapida e la tabella dei modelli del produttore indicano Lite come uno dei due profili che utilizzano lo stesso flusso di valutazione. Riceve un'interazione testuale e definizioni di comportamento in linguaggio semplice, quindi restituisce tre probabilità per ogni definizione: presente, assente e non osservabile. L'output utile del profilo è un record del comportamento con incertezza esplicita, non una risposta scritta alla conversazione.

Scegli l'osservazione e i suoi confini

Definisci il comportamento con parole adatte alla tua attività. Per un controllo sul passaggio a un operatore, specifica se significa che l'utente chiede esplicitamente una persona, che l'assistente dichiara necessario il passaggio, oppure una delle due condizioni. Se la semplice delusione non deve contare, dillo. Per un controllo sulle scuse, definisci quale formulazione costituisce una scusa invece di affidarti a un'etichetta poco chiara. Ogni definizione ha un identificatore che il valutatore restituisce insieme alle sue probabilità.

L'insieme dei comportamenti appartiene al chiamante. Esempi come frustrazione, promesse non supportate, uso improprio degli strumenti o azioni ripetitive dell'agente sono definizioni da fornire, non un elenco fisso di categorie native. Mantieni ogni definizione osservabile nell'interazione fornita. Un breve segmento può stabilire se l'assistente si è scusato pur mancando di prove che un problema esterno sia stato effettivamente risolto.

Prepara il segmento di conversazione

L'input documentato da Respan colloca i messaggi precedenti in span.input e il turno da valutare in span.output. Il contenuto del messaggio è una stringa. Conserva il contesto necessario per comprendere il turno, inclusi i ruoli dei partecipanti, la richiesta pertinente dell'utente e qualsiasi prova testuale utilizzata dall'assistente. Per un controllo di qualità, fornisci il turno effettivo anziché una parafrasi che elimini il comportamento da valutare.

Una revisione illustrativa può prendere un messaggio dell'utente che descrive problemi ripetuti e una risposta dell'assistente che si offre di indagare. Definisci la frustrazione dell'utente e una promessa dell'assistente come osservazioni separate. Se il risultato di uno strumento è rilevante per giudicare se un'affermazione era fondata, conserva nel contesto il testo pertinente di quel risultato. L'output è una valutazione di quelle definizioni nel segmento fornito; il modello non svolge l'indagine promessa né modifica la conversazione stessa.

Presente, assente e non osservabile

La risposta di valutazione contiene l'id del comportamento con p_present, p_absent e p_not_observable, la cui somma è circa 1. Non osservabile significa che la traccia non permette di rispondere alla domanda. È diverso da assente. Per una definizione come l'accettazione di una soluzione da parte del cliente, un segmento che si interrompe prima della reazione del cliente costituisce una prova incompleta, anche se la risposta dell'assistente suona sicura.

Conserva tutti e tre i valori quando prepari un risultato per la revisione. Una categoria scelta in base al valore più alto può essere utile per la visualizzazione, ma la distribuzione conserva il grado di incertezza dell'osservazione. Non usare un basso valore di presenza da solo per concludere che il comportamento sicuramente non si è verificato. Quando prevale la mancanza di prove, l'azione utile può essere ottenere il contesto pertinente o conservare il risultato come sconosciuto, invece di inventare una spiegazione.

Più definizioni sulle stesse prove

Il flusso di valutazione del produttore valuta più definizioni di comportamento insieme su un'unica traccia e restituisce un risultato per ogni identificatore nell'ordine della richiesta. La sua documentazione non specifica alcun limite al numero di comportamenti per richiesta. Ciò non stabilisce una finestra di token universale né una dimensione illimitata della traccia. Mantieni le definizioni mirate e le prove pertinenti, e conserva l'associazione tra ogni risultato restituito e la definizione che lo ha prodotto.

I risultati sui comportamenti sono osservazioni indipendenti, non una singola risposta a scelta esclusiva. Frustrazione, scuse e una proposta di passaggio a un operatore possono essere tutte presenti nello stesso scambio. Le singole distribuzioni a tre vie hanno significato all'interno di ciascuna definizione; sommare i valori di presenza di comportamenti diversi non crea una distribuzione di categorie normalizzata né un punteggio ordinato secondo una rubrica.

Mantieni il profilo selezionato con i suoi risultati

Il produttore documenta i nomi Lite e standard con una forma di richiesta e di risultato condivisa. Questo contratto permette di preparare le tracce e interpretare le probabilità dei comportamenti per entrambi i profili nominati. Non stabilisce che Lite abbia gli stessi pesi, lo stesso numero di parametri o la stessa qualità dell'altra edizione. Mantieni identificabile il profilo selezionato quando ne esamini i risultati, invece di scambiare silenziosamente risultati di edizioni diverse.

Usa conversazioni etichettate dell'attività prevista per scegliere le soglie di registrazione, instradamento o revisione. Conserva per l'ispezione i risultati con valori elevati di non osservabile e le osservazioni al limite, e confronta qualsiasi errore apparente con il turno originale e la definizione del comportamento. L'artefatto finale utile contiene l'identificatore del segmento di testo, la definizione, il profilo selezionato e il risultato completo delle probabilità a tre vie. Un passaggio successivo dell'applicazione decide cosa fare con quell'osservazione; l'output di valutazione di Lite non esegue di per sé un passaggio a un operatore, non blocca una risposta né genera una correzione.