Resurssit
Moodlen AI-tekstikysymystyyppi
Tämän englanninkielisen sivun automaattinen konekäännös, jota ei ole vielä tarkastanut äidinkielinen puhuja.
Useimmat tekoälyvisailuintegraatiot lähettävät jokaisen vastauksen kiinteään arvostelukutsuun. Tämä Moodle-kysymystyyppi tekee päinvastoin: opettaja kirjoittaa arviointikriteerit. Jokaisessa kysymyksessä on kehote, joka kertoo mallille, miten vastausta arvioidaan, ja valinnainen pisteytysmalli, joka kuvaa, miten pisteet myönnetään, joten kohta ”kirjoita lause imperfektissä” voi määrittää kymmenen pistettä virheettömyydestä, nolla rikkoutuneesta kieliopista ja miinus yksi piste jokaisesta kirjoitusvirheestä. Malli palauttaa arvosanan ja palautteen, ja opettaja voi nähdä palautteen vastauksen vieressä arvostellessaan käsin.
Mitä sillä voi tehdä
Lisää AIText-kysymys mihin tahansa Moodle-visailuun, kirjoita kehote ja pisteytysmallit ja testaa kehotteita muokkauslomakkeen AJAX-kehote-testarilla sen sijaan, että kävisit läpi esikatseluyrityksiä. Arvostelu kulkee kahden rinnakkaisen kysymyskäyttäytymisen (välitön ja viivästetty) kautta, jotka on asennettava kysymystyypin rinnalle, mikä pitää tekoälyarvostelun erillään Moodlen ydinkäyttäytymisistä; olemassa olevat yritykset, jotka käyttivät vanhaa interactivecountback-käyttäytymistä, siirtyvät päivityksen yhteydessä. Jos malliin ei saada yhteyttä, arvostelu heikkenee eikä kaadu, joten yritystä ei menetetä. Koska kysymys on natiivinen visailutyyppi, tulokset päätyvät arvosanakirjaan kuin mikä tahansa muu kohde – ja juuri sitä kurssitiimi tarvitsee ennen kuin se voi pitää automaattista arvostelua pilottina eikä demona.
Suunnittelu asettaa myös arviointikriteerit sinne, missä palautteen laadusta päätetään: kehotteeseen, jonka opettaja kirjoittaa, eikä toimittajan oletukseen. Se on työkalun rehellinen käyttö – kriteerit, jotka voi tarkastaa ja muuttaa – vaikka se tarkoittaa myös, että laadun katto on arviointikriteerit, ja epämääräinen kehote tuottaa epämääräistä arvostelua. Oppilaitokset ottavat sen käyttöön matalan panoksen toistuvissa tarkistuksissa, joihin formatiivinen arviointi nojaa ja joissa ihminen lukisi muuten neljäkymmentä lyhyttä vastausta yössä.
Kenelle se on tarkoitettu
Moodlen ylläpitäjille ja kehittäjille, jotka jo pyörittävät sivustoa, opettajille, jotka haluavat tekoälyarvostelun ilman erillistä alustaa tai kaupallista lisenssiä, ja tutkijoille, jotka tarvitsevat hallittavan arvosteluputken tutkittavaksi. Se vaatii Moodle 4.5:n tai uudemman ja API-yhteyden malliin – joko OpenAI:n tai Azuren Moodlen tekoälyalijärjestelmän kautta tai itse isännöidyn Ollama-instanssin Local AI Managerin kautta, mikä pitää opiskelijoiden tekstit paikallisessa infrastruktuurissa. Liitännäistä ylläpitää Marcus Green, se on Moodlen liitännäismarkkinapaikalla, ja sillä oli 33 tähteä ja 36 haarautumaa, kun tämä sivu vahvistettiin.
Huomioita ja varauksia
Avoin lähdekoodi GPL v3 tai uudempi -lisenssillä, mutta ilmainen ei tarkoita ilmaista ajaa: joku maksaa mallin API:sta, ja arvostelun laatu riippuu mallin valinnasta ja kehotteen suunnittelusta. Vapaatekstivastaukset lähtevät Moodle-palvelimelta, kun käytetään etäpalvelua, joten oppilaitoksen tietosopimus määrää, mitä saa lähettää; itse isännöity Ollama-reitti on olemassa sivustoille, jotka eivät voi lähettää opiskelijoiden töitä ulos. Repossa ei ilmoiteta julkaistua tarkkuus- tai yhdenmukaisuustutkimusta, joten liitännäistä ei pitäisi ottaa käyttöön olettaen, että LLM-arvostelu vastaa ihmisarvostelua – validiteetti on osoitettava paikallisesti ihmispisteitä vastaan ennen kuin millään arvosanalla on painoa. Kumppanikäyttäytymiset ovat kova riippuvuus: pelkän kysymystyypin asentaminen jättää kysymykset arvostelemattomiksi.