Respan: Span-01 Lite

Span-01 Lite est un profil de modèle désigné sous un nom distinct au sein de la famille Span-01 de Respan, consacrée à la notation des comportements. Le guide de démarrage rapide et le tableau des modèles de l’éditeur présentent Lite comme l’un des deux profils qui partagent le même processus de notation. Il reçoit une interaction textuelle et des définitions de comportements rédigées en langage courant, puis renvoie trois probabilités pour chaque définition : présent, absent et non observable. La sortie utile du profil est un relevé de comportements assorti d’une incertitude explicite, et non une réponse rédigée à la conversation.

Choisir l’observation et ses limites

Définissez le comportement avec les termes qui correspondent à votre tâche. Pour un contrôle de transfert vers un humain, précisez s’il s’agit du cas où l’utilisateur demande explicitement à parler à une personne, de celui où l’assistant indique qu’un transfert est nécessaire, ou de l’une ou l’autre de ces conditions. Si une simple déception ne doit pas compter, indiquez-le. Pour un contrôle d’excuses, définissez quelle formulation constitue une excuse plutôt que de vous fier à une étiquette imprécise. Chaque définition possède un identifiant que l’outil de notation renvoie avec ses probabilités.

L’ensemble des comportements appartient à l’appelant. Des exemples comme la frustration, les promesses non fondées, le mauvais usage d’outils ou les actions répétitives d’un agent sont des définitions à fournir, et non une liste fixe de catégories natives. Veillez à ce que chaque définition soit observable dans l’interaction fournie. Un segment court peut suffire à établir si l’assistant s’est excusé tout en ne contenant aucun élément prouvant qu’un problème externe a réellement été résolu.

Préparer le segment de conversation

Dans l’entrée documentée par Respan, les messages précédents figurent dans span.input et le tour évalué dans span.output. Le contenu d’un message est une chaîne de caractères. Conservez le contexte nécessaire pour comprendre le tour, notamment les rôles des interlocuteurs, la demande pertinente de l’utilisateur et tout élément textuel sur lequel l’assistant s’est appuyé. Pour un contrôle qualité, fournissez le tour réel plutôt qu’une paraphrase qui ferait disparaître le comportement évalué.

Une revue illustrative peut porter sur un message d’utilisateur décrivant des difficultés répétées et une réponse de l’assistant proposant d’enquêter. Définissez la frustration de l’utilisateur et une promesse de l’assistant comme des observations distinctes. Si le résultat d’un outil compte pour juger si une affirmation était fondée, conservez le texte pertinent de ce résultat dans le contexte. La sortie est une évaluation de ces définitions dans le segment fourni ; le modèle ne mène pas l’enquête promise et ne modifie pas la conversation elle-même.

Présent, absent et non observable

La réponse de notation contient l’identifiant du comportement avec p_present, p_absent et p_not_observable, dont la somme est d’environ 1. Non observable signifie que la trace ne permet pas de répondre à la question. Cette valeur se distingue d’absent. Pour une définition telle que l’acceptation d’une solution par le client, un segment qui se termine avant la réaction du client constitue un élément incomplet, même si la réponse de l’assistant paraît assurée.

Conservez les trois valeurs lorsque vous préparez un résultat en vue d’une revue. Une catégorie choisie d’après la valeur la plus élevée peut être utile pour un affichage, mais la distribution conserve le degré d’incertitude de l’observation. N’utilisez pas une faible valeur de présence à elle seule pour conclure que le comportement ne s’est certainement pas produit. Lorsque l’absence d’éléments domine, l’action utile peut consister à obtenir le contexte pertinent ou à conserver le résultat comme inconnu plutôt qu’à inventer une explication.

Plusieurs définitions sur les mêmes éléments

Le processus de notation de l’éditeur évalue plusieurs définitions de comportements ensemble sur une même trace et renvoie un résultat pour chaque identifiant, dans l’ordre de la requête. Sa documentation ne fixe aucun plafond du nombre de comportements par requête. Cela n’établit ni une fenêtre de tokens universelle ni une taille de trace illimitée. Gardez des définitions ciblées et des éléments pertinents, et conservez l’association entre chaque résultat renvoyé et la définition qui l’a produit.

Les résultats par comportement sont des observations indépendantes et non une réponse unique à choix exclusif. La frustration, une excuse et une proposition de transfert peuvent toutes être présentes dans le même échange. Leurs distributions individuelles à trois issues ont un sens au sein de chaque définition ; additionner les valeurs de présence de différents comportements ne produit ni une distribution de catégories normalisée ni un score ordonné sur une grille d’évaluation.

Conserver le profil sélectionné avec ses résultats

Le concepteur documente les noms Lite et standard avec une forme de requête et de résultat commune. Ce contrat permet de préparer les traces et d’interpréter les probabilités de comportement pour l’un ou l’autre des profils nommés. Il n’établit pas que Lite possède les mêmes poids, le même nombre de paramètres ou la même qualité que l’autre édition. Gardez le profil sélectionné identifiable lors de la revue de ses résultats plutôt que d’échanger silencieusement des résultats issus d’éditions différentes.

Utilisez des conversations étiquetées issues de la tâche visée pour choisir les seuils de journalisation, de routage ou de revue. Conservez pour inspection les résultats à forte probabilité non observable et les observations limites, et comparez toute erreur apparente avec le tour d’origine et la définition du comportement. L’artefact final utile contient l’identifiant du segment de texte, la définition, le profil sélectionné et le résultat probabiliste complet à trois issues. Une étape ultérieure de l’application décide de la suite à donner à cette observation ; la sortie de notation de Lite n’exécute pas elle-même un transfert, ne bloque pas une réponse et ne génère pas de correction.