Respan: Span-01 Lite

Το Span-01 Lite είναι ένα προφίλ μοντέλου με ξεχωριστό όνομα στην οικογένεια βαθμολόγησης συμπεριφορών Span-01 της Respan. Ο οδηγός γρήγορης εκκίνησης και ο πίνακας μοντέλων του παραγωγού προσδιορίζουν το Lite ως ένα από τα δύο προφίλ που χρησιμοποιούν την ίδια ροή βαθμολόγησης. Λαμβάνει μια αλληλεπίδραση κειμένου και ορισμούς συμπεριφορών σε απλή γλώσσα και στη συνέχεια επιστρέφει τρεις πιθανότητες για κάθε ορισμό: παρουσία, απουσία και μη παρατηρησιμότητα. Η χρήσιμη έξοδος του προφίλ είναι μια εγγραφή συμπεριφοράς με ρητή αβεβαιότητα, όχι μια γραπτή απάντηση στη συνομιλία.

Επιλέξτε την παρατήρηση και τα όριά της

Ορίστε τη συμπεριφορά με λέξεις που ταιριάζουν στην εργασία σας. Για έναν έλεγχο μεταβίβασης σε άνθρωπο, προσδιορίστε αν σημαίνει ότι ο χρήστης ζητά ρητά κάποιο πρόσωπο, ότι ο βοηθός λέει πως χρειάζεται μεταβίβαση ή οποιαδήποτε από τις δύο συνθήκες. Αν η απλή απογοήτευση δεν πρέπει να μετρά, δηλώστε το. Για έναν έλεγχο απολογίας, ορίστε ποια διατύπωση συνιστά απολογία αντί να βασίζεστε σε μια ασαφή ετικέτα. Κάθε ορισμός έχει ένα αναγνωριστικό που ο βαθμολογητής επιστρέφει μαζί με τις πιθανότητές του.

Το σύνολο συμπεριφορών ανήκει στον καλούντα. Παραδείγματα όπως απογοήτευση, υποσχέσεις χωρίς τεκμηρίωση, κακή χρήση εργαλείων ή επαναλαμβανόμενες ενέργειες πράκτορα είναι ορισμοί που πρέπει να δοθούν, όχι μια σταθερή λίστα εγγενών κατηγοριών. Κρατήστε κάθε ορισμό παρατηρήσιμο στην παρεχόμενη αλληλεπίδραση. Ένα σύντομο τμήμα μπορεί να απαντά αν ο βοηθός απολογήθηκε, αλλά να μην περιέχει στοιχεία ότι ένα εξωτερικό πρόβλημα λύθηκε πραγματικά.

Προετοιμάστε το τμήμα της συνομιλίας

Η τεκμηριωμένη είσοδος της Respan τοποθετεί τα προηγούμενα μηνύματα στο span.input και τον γύρο της συνομιλίας που αξιολογείται στο span.output. Το περιεχόμενο μηνύματος είναι συμβολοσειρά. Διατηρήστε το πλαίσιο που χρειάζεται για την κατανόηση του γύρου της συνομιλίας, συμπεριλαμβανομένων των ρόλων των ομιλητών, του σχετικού αιτήματος χρήστη και κάθε κειμενικού στοιχείου που χρησιμοποίησε ο βοηθός. Για έναν έλεγχο ποιότητας, δώστε τον πραγματικό γύρο της συνομιλίας αντί για μια παράφραση που αφαιρεί τη συμπεριφορά προς αξιολόγηση.

Ένας ενδεικτικός έλεγχος μπορεί να χρησιμοποιεί ένα μήνυμα χρήστη που περιγράφει επανειλημμένες δυσκολίες και μια απάντηση βοηθού που προσφέρεται να διερευνήσει. Ορίστε την απογοήτευση του χρήστη και την υπόσχεση του βοηθού ως χωριστές παρατηρήσεις. Αν το αποτέλεσμα ενός εργαλείου έχει σημασία για να κριθεί αν ένας ισχυρισμός ήταν τεκμηριωμένος, διατηρήστε το σχετικό κείμενο αυτού του αποτελέσματος στο πλαίσιο. Η έξοδος είναι αξιολόγηση αυτών των ορισμών στο παρεχόμενο τμήμα· το μοντέλο δεν πραγματοποιεί την υποσχεθείσα διερεύνηση ούτε αλλάζει τη συνομιλία.

Παρουσία, απουσία και μη παρατηρησιμότητα

Η απόκριση βαθμολόγησης περιέχει το id της συμπεριφοράς με p_present, p_absent και p_not_observable, που αθροίζονται περίπου σε 1. Η μη παρατηρησιμότητα σημαίνει ότι το ίχνος δεν μπορεί να απαντήσει στο ερώτημα. Διαφέρει από την απουσία. Για έναν ορισμό όπως η αποδοχή λύσης από τον πελάτη, ένα τμήμα που τελειώνει πριν αντιδράσει ο πελάτης αποτελεί ελλιπή τεκμηρίωση, ακόμη και αν η απάντηση του βοηθού ακούγεται βέβαιη.

Κρατήστε και τις τρεις τιμές όταν προετοιμάζετε ένα αποτέλεσμα για έλεγχο. Μια κατηγορία που επιλέγεται βάσει της υψηλότερης τιμής μπορεί να είναι χρήσιμη για εμφάνιση, αλλά η κατανομή διατηρεί το πόσο αβέβαιη ήταν η παρατήρηση. Μη χρησιμοποιείτε μόνο μια χαμηλή τιμή παρουσίας για να συμπεράνετε ότι η συμπεριφορά σίγουρα δεν συνέβη. Όταν κυριαρχεί η έλλειψη στοιχείων, χρήσιμη ενέργεια μπορεί να είναι η απόκτηση του σχετικού πλαισίου ή η διατήρηση του αποτελέσματος ως άγνωστου αντί για την επινόηση εξήγησης.

Πολλοί ορισμοί πάνω στα ίδια στοιχεία

Η ροή βαθμολόγησης του παραγωγού αξιολογεί πολλούς ορισμούς συμπεριφορών μαζί πάνω σε ένα ίχνος και επιστρέφει ένα αποτέλεσμα για κάθε αναγνωριστικό με τη σειρά του αιτήματος. Η τεκμηρίωσή του δεν ορίζει ανώτατο πλήθος συμπεριφορών ανά αίτημα. Αυτό δεν αποδεικνύει καθολικό παράθυρο tokens ή απεριόριστο μέγεθος ίχνους. Κρατήστε τους ορισμούς στοχευμένους και τα στοιχεία σχετικά και διατηρήστε τη συσχέτιση κάθε επιστρεφόμενου αποτελέσματος με τον ορισμό που το παρήγαγε.

Τα αποτελέσματα συμπεριφορών είναι ανεξάρτητες παρατηρήσεις, αντί για μία απάντηση αποκλειστικής επιλογής. Απογοήτευση, απολογία και προτεινόμενη μεταβίβαση μπορούν να είναι όλες παρούσες στην ίδια ανταλλαγή. Οι επιμέρους κατανομές τριών ενδεχομένων έχουν νόημα μέσα σε κάθε ορισμό· η πρόσθεση τιμών παρουσίας από διαφορετικές συμπεριφορές δεν δημιουργεί κανονικοποιημένη κατανομή κατηγοριών ή βαθμολογία διατεταγμένης ρουμπρίκας.

Διατηρήστε το επιλεγμένο προφίλ μαζί με τα αποτελέσματά του

Ο κατασκευαστής τεκμηριώνει τα ονόματα Lite και standard με κοινή μορφή αιτήματος και αποτελέσματος. Αυτή η σύμβαση υποστηρίζει την προετοιμασία ιχνών και την ερμηνεία πιθανοτήτων συμπεριφορών για οποιοδήποτε από τα δύο ονομασμένα προφίλ. Δεν αποδεικνύει ότι το Lite έχει τα ίδια βάρη, πλήθος παραμέτρων ή ποιότητα με την άλλη έκδοση. Διατηρήστε αναγνωρίσιμο το επιλεγμένο προφίλ όταν ελέγχετε τα αποτελέσματά του, αντί να ανταλλάσσετε σιωπηρά αποτελέσματα διαφορετικών εκδόσεων.

Χρησιμοποιήστε συνομιλίες με ετικέτες από την προβλεπόμενη εργασία για να επιλέξετε κατώφλια καταγραφής, δρομολόγησης ή ελέγχου. Διατηρήστε αποτελέσματα με υψηλή μη παρατηρησιμότητα και οριακές παρατηρήσεις για εξέταση και συγκρίνετε κάθε φαινομενικό σφάλμα με τον αρχικό γύρο της συνομιλίας και τον ορισμό συμπεριφοράς. Το χρήσιμο τελικό παραδοτέο περιέχει το αναγνωριστικό του τμήματος κειμένου, τον ορισμό, το επιλεγμένο προφίλ και το πλήρες αποτέλεσμα πιθανοτήτων των τριών ενδεχομένων. Ένα μεταγενέστερο βήμα εφαρμογής αποφασίζει τι θα κάνει με αυτή την παρατήρηση· η έξοδος βαθμολόγησης του Lite δεν εκτελεί από μόνη της μεταβίβαση, δεν αποκλείει μια απάντηση ούτε παράγει διόρθωση.