Πώς μπορούν οι πράκτορες ΤΝ να στηρίξουν φοιτητές και διδάσκοντες;

Αυτόματη μηχανική μετάφραση αυτής της αγγλικής σελίδας, που δεν έχει ακόμη ελεγχθεί από φυσικό ομιλητή.

Μια επίδειξη προμηθευτή διαρκεί σαράντα λεπτά. Ο πράκτορας διαβάζει το πρόγραμμα σπουδών, συντάσσει το κουίζ της επόμενης εβδομάδας, επισημαίνει τρεις φοιτητές που δεν έχουν ανοίξει την ανάγνωση και προσφέρεται να τους στείλει email. Ο αντιπρύτανης θέλει απόφαση αδειοδότησης μέχρι το τέλος του μήνα.

Ένας πράκτορας σχεδιάζει, καλεί εργαλεία, κρατά πλαίσιο, χωρίζει την εργασία σε υποεργασίες και προσαρμόζεται ανά γύρο, κάτι που είναι περισσότερο από ό,τι κάνει ένα chatbot. Οι ρόλοι προς την πλευρά του φοιτητή και του διδάσκοντα που ανοίγονται είναι πραγματικοί. Τα τεκμήρια δεν δείχνουν ότι περισσότερη αυτονομία παράγει περισσότερη μάθηση: στη μοναδική άμεση σύγκριση εδώ, ένας πράκτορας και ένα chatbot ήρθαν ισόπαλοι. Βάλτε την αυτονομία εκεί όπου ένας άνθρωπος ελέγχει την έξοδο, κρατήστε τον σχεδιασμό στον μαθητή και βαθμολογήστε την ποιότητα διδασκαλίας απέναντι στη δική σας ρουμπρίκα.

Η σύντομη εκδοχή

1. Ονομάστε τη δουλειά πριν από το προϊόν.

2. Ξεκινήστε από την πλευρά του διδάσκοντα, όπου ένας εκπαιδευτικός επιθεωρεί ήδη τη δουλειά.

3. Αντιμετωπίστε την πρόσθετη αυτονομία ως κόστος μέχρι να πουν τα τεκμήρια το αντίθετο.

4. Κρατήστε τον σχεδιασμό και την κρίση στον μαθητή, γιατί αυτά είναι που υπάρχει για να χτίσει η εργασία.

5. Βαθμολογήστε τον πράκτορα απέναντι στη ρουμπρίκα σας και προγραμματίστε έναν έλεγχο χωρίς βοήθεια πριν τελειώσει η πιλοτική εφαρμογή.

Διαλέξτε τη δουλειά πριν διαλέξετε τον πράκτορα

Το Πρακτορικές ροές εργασίας στην εκπαίδευση ονομάζει τέσσερις επαναλαμβανόμενες ικανότητες: στοχασμό, σχεδιασμό, χρήση εργαλείων και συνεργασία πολλαπλών πρακτόρων. Κάθε μία προσθέτει κόστος δίπλα στη δυνατότητα, σε ερμηνευσιμότητα, συντονισμό, εμπιστοσύνη, καθυστέρηση και εποπτεία.

Οι ρόλοι προς την πλευρά του φοιτητή εκτείνονται από προσαρμοστική διδασκαλία και σχεδιασμό μελέτης, μέσα από διαμορφωτική ανατροφοδότηση, καθοδηγούμενη επίλυση προβλημάτων και παραγωγή εξάσκησης, έως συστάσεις προαπαιτούμενων και στοχαστική μεταγνωστική κατασκευή προτροπών. Οι ρόλοι προς την πλευρά του διδάσκοντα καλύπτουν ανάπτυξη υλικού, παραγωγή ερωτήσεων και επικύρωση, διαλογή ανατροφοδότησης, αναλυτικά μαθήματος, διδακτικό σχεδιασμό, ανάκτηση πόρων και ενορχήστρωση εξειδικευμένων υποπρακτόρων.

Δύο από αυτούς είναι ασφαλέστεροι νωρίς, γιατί και οι δύο παράγουν ένα τεχνούργημα που ένας άνθρωπος διαβάζει πριν από τους φοιτητές: μια γεννήτρια ερωτήσεων μαζί με έναν επικυρωτή, και σύνταξη σχεδίου που ένας εκπαιδευτικός επεξεργάζεται.

Ξεκινήστε εκεί όπου ένας άνθρωπος ελέγχει ήδη τη δουλειά

Ο Tutor CoPilot, η πρώτη τυχαιοποιημένη ελεγχόμενη δοκιμή ανθρώπινου-ΤΝ συστήματος σε ζωντανή διδασκαλία, έδωσε σε άπειρους διδάσκοντες καθοδήγηση σε πραγματικό χρόνο αντλημένη από τον συλλογισμό έμπειρων διδασκόντων, σε 900 διδάσκοντες και περίπου 1.800 φοιτητές. Οι φοιτητές των διδασκόντων με πρόσβαση είχαν 4 ποσοστιαίες μονάδες περισσότερες πιθανότητες να κατακτήσουν θέματα, φτάνοντας τις 9 μονάδες στους χαμηλότερα αξιολογημένους διδάσκοντες, των οποίων οι φοιτητές έφτασαν εκείνους των καλύτερα αξιολογημένων διδασκόντων στην ομάδα ελέγχου. Κόστισε περίπου 20 δολάρια ανά διδάσκοντα ετησίως, και η ανάλυση περισσότερων από 550.000 μηνυμάτων διδασκαλίας έδειξε διδάσκοντες να μετατοπίζονται από το να δίνουν απαντήσεις στο να θέτουν καθοδηγητικές ερωτήσεις. Αυτή είναι ΤΝ που ενισχύει τον εκπαιδευτικό.

Ο πράκτορας δεν δίδαξε τον φοιτητή. Τροφοδότησε έναν άνθρωπο στη μέση της συνομιλίας, και ο άνθρωπος αποφάσισε τι θα πει. Ένας άνθρωπος στον βρόχο και ένα αποτέλεσμα κοντά στην εργασία είναι αυτά που κάνουν το αποτέλεσμα μεταφέρσιμο σε άλλο μάθημα.

Μην υποθέσετε ότι περισσότερη αυτονομία αγοράζει περισσότερη μάθηση

Μια μελέτη 130 φοιτητών σε μάθημα ηλεκτρονικού εμπορίου βρήκε ότι και τα chatbots και οι πράκτορες γενετικής ΤΝ βαθμολογήθηκαν πάνω από την παραδοσιακή ηλεκτρονική μάθηση στη μάθηση και στην εξατομίκευση, χωρίς σημαντική διαφορά ανάμεσα στο chatbot και στον πράκτορα. Προστέθηκε αυτονομία, καμία προστιθέμενη αξία σε αυτές τις μετρήσεις.

Το πλαίσιο αυτής της μελέτης αντιμετωπίζει τους πράκτορες ως φραγμένους μαθησιακούς εταίρους υπό ανθρώπινη εποπτεία, με στόχους, σημεία ελέγχου και τελικές αποφάσεις να μένουν σε ανθρώπους. Το Πέρα από την ετικέτα του πράκτορα το κάνει κανόνα διακυβέρνησης: η αυτονομία δεν πρέπει να υπερβαίνει την ωριμότητα των τεκμηρίων ή την ισχύ υπόλογου ανθρώπινου ελέγχου, και τα τεκμήρια είναι ισχυρότερα σε αποτελέσματα επιπέδου τεχνουργήματος και ασθενέστερα στη διαρκή μάθηση και στην ισότητα.

Ο κίνδυνος προς την πλευρά του μαθητή τρέχει προς την ίδια κατεύθυνση. Ένας πράκτορας που σχεδιάζει και παρακολουθεί για έναν φοιτητή αφαιρεί την εξάσκηση που χτίζει την αυτορρύθμιση και προσκαλεί εκφόρτωση. Η καθοδήγηση βέλτιστων πρακτικών ζητά σκόπιμη τριβή, στηρικτική υποστήριξη που υποχωρεί και ανθρώπινη εποπτεία. Οι επιθυμητές δυσκολίες έχουν έτοιμα παραδείγματα. Πράκτορες εποικοδομητικής σύγκρουσης που αντιλέγουν σε ένα αδύναμο σχέδιο βελτίωσαν τα αποτελέσματα σχεδιασμού στην έρευνα που εξετάστηκε. Οι προσομοιωμένοι συμφοιτητές στηρίζουν τη συνεργατική μάθηση και τη σωκρατική διερώτηση, και οι κλινικές προσομοιώσεις επιτρέπουν στους μαθητές να προβάρουν εκεί όπου το λάθος είναι φθηνό.

Η δοκιμή για οποιονδήποτε από αυτούς: μετά τη συνεδρία, τι μπορεί να κάνει ο φοιτητής που το έκανε ο πράκτορας πριν; Το να παραδώσει κάποιος την κρίση κοστίζει στον φοιτητή την εξάσκηση στη χρήση της.

Ελέγξτε τον πράκτορα απέναντι στη δική σας κρίση

Οκτώ πράκτορες διδασκαλίας με ΤΝ αναπτυγμένοι σε ένα ιατρικό πρόγραμμα σπουδών κατατάχθηκαν διαφορετικά από τις βαθμολογίες που παρήγαγε η πλατφόρμα και από μια ανεξάρτητη ρουμπρίκα ειδικών. Ο τρίτος στην κατάταξη της πλατφόρμας πράκτορας βγήκε τελευταίος στην ποιότητα διδασκαλίας. Οι βαθμολογίες της πλατφόρμας δεικτοδοτούν την επίδοση των φοιτητών, που κινείται για λόγους άσχετους με τη διδασκαλία.

Ρωτήστε τι μετρά ένας αριθμός σε έναν πίνακα ελέγχου, ποιος έγραψε τη ρουμπρίκα πίσω του και πώς θα φαινόταν μια χαμηλή βαθμολογία στη δουλειά των φοιτητών. Η παιδαγωγική ασφάλεια ανήκει στην ίδια εξέταση, αφού μια αλυσίδα πρακτόρων καθιστά δύσκολο να πει κανείς ποιο στοιχείο είναι υπόλογο όταν μια απάντηση είναι λάθος.

Σχεδιάστε για την απενεργοποίηση

Τυχαιοποιημένες δοκιμές δείχνουν ότι η σύντομη βοήθεια ΤΝ μπορεί να καταπιέσει τη μεταγενέστερη επίδοση χωρίς βοήθεια, και το διάστημα μετά την απόσυρση, η γνωστική έκπλυση, είναι σχεδόν εντελώς αμέτρητο. Η σύνθεση πίσω από αυτή τη σελίδα αντλεί από μια ανασκόπηση σκοπού 474 μελετών και βρίσκει τη δουλειά συγκεντρωμένη στην τριτοβάθμια εκπαίδευση, στην εκπαίδευση STEM, σε βραχυπρόθεσμους σχεδιασμούς και σε διδασκαλία βασισμένη σε κείμενο, με μόνο μια μειοψηφία θεμελιωμένη ρητά σε εκπαιδευτική θεωρία. Μια πιλοτική εφαρμογή που τελειώνει όταν τελειώνει η άδεια έχει μετρήσει το λάθος παράθυρο.

Πού κάνουν λάθος οι διοικήσεις σε αυτό

Ένας πράκτορας είναι ένα αναβαθμισμένο chatbot, οπότε η αναβάθμιση πρέπει να φαίνεται στα αποτελέσματα. Στη σύγκριση των 130 φοιτητών και οι δύο συνθήκες ΤΝ νίκησαν την ηλεκτρονική μάθηση και καμία δεν νίκησε την άλλη.

Ο πίνακας ελέγχου κατατάσσει την ποιότητα διδασκαλίας. Κατατάσσει την επίδοση των φοιτητών, και οκτώ πράκτορες παρήγαγαν κατάταξη που αντιστρέφει την τρίτη και την τελευταία θέση απέναντι σε ρουμπρίκα ειδικών.

Η αυτονομία είναι το χαρακτηριστικό που αγοράζεις. Ο κανόνας της αναλογικότητας τρέχει αντίστροφα, και τα τεκμήρια είναι πιο ισχνά εκεί όπου η αυτονομία είναι μεγαλύτερη.

Η πρόσβαση κλείνει το χάσμα ισότητας. Η άνιση πρόσβαση σε ικανά πρακτορικά συστήματα μπορεί να το διευρύνει, και ένας πράκτορας αναπαράγει τη μεροληψία των δεδομένων εκπαίδευσης σε κλίμακα.

Τι θα σας φέρουν μπροστά σας

«Οι φοιτητές απλώς θα το αφήσουν να κάνει τη δουλειά.» Μερικοί θα το κάνουν, και η αρχιτεκτονική καθορίζει πόσο εύκολο είναι. Οι πράκτορες που σχεδιάζουν και συντάσσουν για τον φοιτητή το προσκαλούν. Οι πράκτορες που απαιτούν μια απόπειρα και μετά θέτουν μια ερώτηση, όχι.

«Η αξιολόγηση του προμηθευτή λέει ότι δουλεύει.» Ρωτήστε τι μετρά ο αριθμός. Αν είναι επίδοση φοιτητών μετρημένη από την πλατφόρμα, μετρά τους φοιτητές όσο και τον πράκτορα.

«Κανείς δεν μπορεί να πει ποιος πράκτορας είναι υπόλογος σε μια αλυσίδα.» Αλήθεια για τις περισσότερες τρέχουσες αναπτύξεις. Ονομάστε έναν υπεύθυνο για την αλυσίδα, καταγράψτε ποιο στοιχείο παρήγαγε ποια έξοδο και κρατήστε ένα ανθρώπινο σημείο ελέγχου πριν φτάσει οτιδήποτε σε αρχείο φοιτητή.

Τι να κάνετε αυτή την εβδομάδα

1. Γράψτε τη δουλειά και το αποτέλεσμα με το οποίο θα την κρίνετε, μία πρόταση το καθένα, πριν από την επόμενη κλήση με τον προμηθευτή.

2. Βαθμολογήστε την έξοδο ενός πράκτορα απέναντι στη ρουμπρίκα σας σε δέκα κομμάτια πραγματικής δουλειάς φοιτητών και κρατήστε τις βαθμολογίες.

3. Προσθέστε μια χρονολογημένη εργασία χωρίς βοήθεια με ονομασμένο υπεύθυνο στο σχέδιο της πιλοτικής εφαρμογής.

Πού να πάτε μετά

Το Ανάπτυξη δασκάλου ΤΝ καλύπτει την κατασκευή προς την πλευρά του φοιτητή από τον στόχο έως την κλίμακα βοήθειας, και το Αξιολόγηση παρεμβάσεων με ΤΝ: μέθοδοι καλύπτει αν το πράγμα δούλεψε. Η ευφυής διδασκαλία και η επάρκεια σε τεχνητή νοημοσύνη παρέχουν το λεξιλόγιο σχεδιασμού που αυτή η σελίδα προϋποθέτει.