Respan: Span-01 Lite

Span-01 Lite ist ein separat benanntes Modellprofil in Respans Span-01-Familie zur Verhaltensbewertung. Die Schnellstartanleitung und die Modelltabelle des Anbieters führen Lite als eines von zwei Profilen mit demselben Bewertungsablauf auf. Es erhält eine Textinteraktion und natürlichsprachliche Verhaltensdefinitionen und gibt dann für jede Definition drei Wahrscheinlichkeiten zurück: vorhanden, nicht vorhanden und nicht beobachtbar. Die nützliche Ausgabe des Profils ist ein Verhaltensdatensatz mit ausdrücklicher Unsicherheit, keine schriftliche Antwort auf das Gespräch.

Die Beobachtung und ihre Grenze wählen

Definieren Sie das Verhalten mit Worten, die zu Ihrer Aufgabe passen. Legen Sie bei einer Übergabeprüfung fest, ob damit gemeint ist, dass der Nutzer ausdrücklich nach einer Person fragt, der Assistent eine Übergabe für nötig erklärt oder eine der beiden Bedingungen zutrifft. Wenn blosse Enttäuschung nicht zählen soll, sagen Sie dies. Definieren Sie bei einer Entschuldigungsprüfung, welcher Wortlaut als Entschuldigung gilt, statt sich auf eine unklare Bezeichnung zu verlassen. Jede Definition hat eine Kennung, die der Bewerter zusammen mit ihren Wahrscheinlichkeiten zurückgibt.

Die Verhaltensmenge gehört dem Aufrufer. Beispiele wie Frustration, unbelegte Versprechen, Werkzeugmissbrauch oder wiederholte Agentenaktionen sind bereitzustellende Definitionen und keine feste Liste nativer Kategorien. Halten Sie jede Definition in der bereitgestellten Interaktion beobachtbar. Ein kurzer Ausschnitt kann klären, ob sich der Assistent entschuldigt hat, ohne Belege dafür zu liefern, dass ein externes Problem tatsächlich gelöst wurde.

Den Gesprächsausschnitt vorbereiten

Respans dokumentierte Eingabe legt vorangehende Nachrichten in span.input und den zu bewertenden Gesprächsbeitrag in span.output ab. Nachrichteninhalt ist eine Zeichenfolge. Bewahren Sie den zum Verständnis des Beitrags nötigen Kontext, einschliesslich Sprecherrollen, relevanter Nutzeranfrage und aller textlichen Belege, die der Assistent verwendet hat. Stellen Sie für eine Qualitätsprüfung den tatsächlichen Beitrag statt einer Paraphrase bereit, die das zu bewertende Verhalten entfernt.

Eine beispielhafte Prüfung kann eine Nutzernachricht über wiederholte Schwierigkeiten und eine Assistentenantwort mit einem Untersuchungsangebot verwenden. Definieren Sie Nutzerfrustration und ein Versprechen des Assistenten als getrennte Beobachtungen. Wenn ein Werkzeugergebnis für die Beurteilung wichtig ist, ob eine Behauptung belegt war, bewahren Sie dessen relevanten Text im Kontext. Die Ausgabe bewertet diese Definitionen im bereitgestellten Ausschnitt; das Modell führt die versprochene Untersuchung nicht durch und verändert das Gespräch selbst nicht.

Vorhanden, nicht vorhanden und nicht beobachtbar

Die Bewertungsantwort enthält die Verhaltenskennung id mit p_present, p_absent und p_not_observable, deren Summe ungefähr 1 ergibt. Nicht beobachtbar bedeutet, dass der Trace die Frage nicht beantworten kann. Es unterscheidet sich von nicht vorhanden. Bei einer Definition wie der Akzeptanz einer Lösung durch den Kunden ist ein Ausschnitt, der vor der Kundenreaktion endet, ein unvollständiger Beleg, selbst wenn die Antwort des Assistenten zuversichtlich klingt.

Bewahren Sie alle drei Werte, wenn Sie ein Ergebnis zur Prüfung vorbereiten. Eine anhand des höchsten Wertes gewählte Kategorie kann für eine Anzeige nützlich sein, doch die Verteilung erhält die Unsicherheit der Beobachtung. Schliessen Sie nicht allein aus einem niedrigen Vorhandenseinswert, dass das Verhalten definitiv nicht auftrat. Wenn fehlende Belege überwiegen, kann es nützlich sein, den relevanten Kontext einzuholen oder das Ergebnis als unbekannt zu bewahren, statt eine Erklärung zu erfinden.

Mehrere Definitionen anhand derselben Belege

Der Bewertungsablauf des Anbieters bewertet mehrere Verhaltensdefinitionen gemeinsam anhand eines Traces und gibt für jede Kennung ein Ergebnis in der Anfragereihenfolge zurück. Seine Dokumentation legt keine Grenze für die Anzahl der Verhaltensdefinitionen pro Anfrage fest. Das belegt kein universelles Tokenfenster und keine unbegrenzte Trace-Grösse. Halten Sie Definitionen zweckgerichtet und Belege relevant und bewahren Sie die Zuordnung jedes zurückgegebenen Ergebnisses zu seiner Definition.

Die Verhaltensergebnisse sind unabhängige Beobachtungen und keine einzelne Antwort mit exklusiver Auswahl. Frustration, eine Entschuldigung und eine vorgeschlagene Übergabe können in demselben Austausch sämtlich vorhanden sein. Ihre jeweiligen dreiteiligen Verteilungen haben innerhalb jeder Definition Bedeutung; das Addieren von Vorhandenseinswerten über unterschiedliche Verhaltensweisen erzeugt weder eine normalisierte Kategorieverteilung noch einen geordneten Rubrik-Score.

Das gewählte Profil bei seinen Ergebnissen bewahren

Der Hersteller dokumentiert die Lite- und Standardnamen mit einem gemeinsamen Anfrage- und Ergebnisformat. Dieser Vertrag unterstützt die Vorbereitung von Traces und die Interpretation von Verhaltenswahrscheinlichkeiten für beide benannten Profile. Er belegt nicht, dass Lite dieselben Gewichte, dieselbe Parameteranzahl oder dieselbe Qualität wie die andere Ausgabe hat. Halten Sie das gewählte Profil bei der Ergebnisprüfung identifizierbar, statt Ergebnisse verschiedener Ausgaben stillschweigend auszutauschen.

Verwenden Sie gekennzeichnete Gespräche aus der vorgesehenen Aufgabe, um Schwellenwerte für Protokollierung, Weiterleitung oder Prüfung zu wählen. Bewahren Sie hohe Nicht-beobachtbar-Ergebnisse und Grenzfallbeobachtungen zur Untersuchung und vergleichen Sie jeden scheinbaren Fehler mit dem ursprünglichen Beitrag und der Verhaltensdefinition. Das nützliche abschliessende Artefakt enthält die Kennung des Textausschnitts, die Definition, das gewählte Profil und das vollständige dreiteilige Wahrscheinlichkeitsergebnis. Ein späterer Anwendungsschritt entscheidet über den Umgang mit dieser Beobachtung; die Bewertungsausgabe von Lite führt selbst keine Übergabe aus, blockiert keine Antwort und erzeugt keine Korrektur.