Kwenye ukurasa huu

Soma ukurasa huu kwa Kiingereza

Tafsiri ya kiotomatiki ya ukurasa huu wa Kiingereza, ambayo haijakaguliwa na mzungumzaji mzawa.

Uundaji wa Maswali wa Kiotomatiki (AQG) — matumizi ya AI, hasa NLP na miundo mikubwa ya lugha (LLM), kuzalisha vipengele vya tathmini ya elimu (maswali ya chaguo-nyingi, majibu mafupi, jaza-nafasi, upangaji kodi, na maswali ya utendaji) kiotomatiki kutoka vyanzo vya nyenzo au malengo ya kujifunza. AQG inawezesha tathmini kwa kiwango kikubwa — kuzalisha maswali ya ya awali, mazoezi yanayobadilika, na vipengele vya mazoezi — lakini ubora hutofautiana pakubwa kati ya aina za vipengele na unahitaji uthibitishaji ili kuepuka maswali yaliyoongozwa na mawazo yasiyo sahihi au yaliyowekwa vibaya. Ni sehemu kuu ya Tathmini ya Kiotomatiki na kiwezeshaji muhimu cha Kujifunza Kufaa na Kujifunza kwa Ubinifu Binafsi.

Maswali ya Kutafakari

  • Uundaji wa maswali wa kiotomatiki huzalisha vipengele vya tathmini kutoka nyenzo kwa kiwango kikubwa — lakini ukurasa huu unaonya kuwa ubora hutofautiana pakubwa kati ya aina za vipengele. Kabla ya kusoma, ni aina ipi unadhani AI inazalisha kwa uaminifu zaidi: chaguo-nyingi, majibu mafupi, au kodi — na kwa nini?
  • Changamoto kuu ni udhibiti wa ubora: LLM zinaweza kuzalisha maswali yasiyo sahihi kwa ukweli. Mtiririko mmoja ulipunguza mawazo yasiyo sahihi kwa 62% kwa kuongeza mzunguko wa zalisha-kisha-thibitisha-boresha. Kwa nini unafikiri kuwa kuuliza AI ithibitishe maswali yake yenyewe kungeboresha kwa njia ya kweli badala ya kuidhinisha tu matokeo yake yenyewe?
  • Utafiti unaonyesha kuwa maswali yaliyozalishwa yanaweza kuelekea kwenye kufikiri cha kiwango cha chini (kukumbuka) isipokuwa yameundwa wazi kwa matokeo ya kiwango cha juu. Kama ungetumia AI kujenga vipengele vya mazoezi, ungejua vipi kama vilikuwa vikifundisha ufahamu halisi au kukariri tu?
  • Urekebishaji wa ugumu ni muhimu: makadirio ya ugumu ya AI yanahusiana kwa nguvu na utendaji wa mwanafunzi, lakini ukurasa unatoa onyo dhidi ya matumizi mabaya ya hatua kuu. Ni lini swali ambalo AI inahukumu kuwa la 'ugumu sahihi' bado likiwa swali lisilo sahihi kuulizwa kwa mwanafunzi fulani?
  • Uundaji unaozingatia Ufikivu hujenga maswali yaliyorekebishwa kwa ajili ya wanafunzi Wasio na Uwezo wa Kusikia na Wenye Ulemavu wa Kusikia, na unakamilishwa kwa ushirikiano na jamii inayolengwa. Mfano huu unapendekeza nini kuhusu kwa nini uundaji wa maswali hauwezi kutendeka kama tatizo la kiufundi tu au la maudhui tu?

Utangulizi

Uundaji wa maswali wa kiotomatiki ni muhimu kwa sababu vipengele vya tathmini ni ghali kuunda kwa mkono, na AI inaweza kuvizalisha haraka na kwa kiwango kikubwa. Hata hivyo, utafiti wa hifadhi ya maarifa unaonyesha kuwa vipengele vilivyozalishwa vinapaswa kuthibitishwa kwa usahihi, uhusiano, na ugumu, na kuwa aina tofauti za vipengele (MCQ, majibu mafupi, kodi) hutofautiana katika jinsi zinavyoweza kuzalishwa kwa uaminifu. AQG kwa hivyo ipo katika mkutano wa AI ya kizazi, NLP ya elimu, na Upimaji wa Kielimu.

Mbinu za uundaji wa maswali

Utafiti wa hifadhi ya maarifa unaonyesha mbinu kadhaa:

  • Mtiririko wa zalisha-kisha-thibitisha: Generate-Then-Validate inaleta mzunguko wa uzalishaji → uthibitishaji → uboreshaji unaopunguza mawazo yasiyo sahihi ya LLM kwa 62% ikilinganishwa na uzalishaji wa moja kwa moja, na kufikia usahihi wa 89% kwenye seti za data za STEM na maboresho ya 23% katika uhusiano. Hatua ya uthibitishaji huchuja vipengele batili au vya ubora wa chini, na vipengele vilivyoshindwa husababisha uzalishaji upya kwa ilani za marekebisho.
  • Uundaji unaotegemea ufuatiliaji wa maarifa: KT4EQG huzalisha maswali ya mazoezi ya kibinafsi yaliyoongozwa na ufuatiliaji wa maarifa, ikirekebisha vipengele kulingana na hali ya maarifa ya kila mwanafunzi badala ya kuzalisha maswali ya jumla.
  • Vitu vya kuchanganya vilivyofungwa na dhana potofu kama lebo za uchunguzi: CoLearn (He na wenzake, 2026) hufunga kila kitu cha kuchanganya na dhana potofu moja iliyochimbwa na kuweka chaguo moja tu lililo sahihi, ili kipengele kizalishwe na malengo yake ya uchunguzi yamejengwa ndani na kisha kipimwe kwa hakika bila wito wa Mifano Mikubwa ya Lugha (LLM) — karibu sekunde 7.6 na karibu \0.005kwakilamzungukokwenyematumizihalisiyawaandishi,dhidiyakaribusekunde32na0.005 kwa kila mzunguko kwenye matumizi halisi ya waandishi, dhidi ya karibu sekunde 32 na \\0.015 kwa mzunguko wa swali la jibu fupi lililopimwa na LLM. Ufungaji ni bora tu kama lebo za dhana potofu zinazoungana nacho, kwa kuwa dhana potofu zilizochimbwa Dhana Potofu Kuhusu AI zililingana na dhana potofu za lengo kwa F1 ≈ 0.56, na chaguo zake za vipengele zilihudumia ujuzi dhaifu kwa kweli mara 0.72.
  • Uundaji unaozingatia kina cha kiutambuzi: Kutathmini kina cha kiutambuzi cha maswali yaliyozalishwa na LLM inachunguza kama vipengele vilivyozalishwa vinagusa kufikiri cha kiwango cha juu (kuumba, kutathmini) au kukariri tu, ikihusiana na uainishaji wa Bloom na Upimaji wa Kielimu.
  • Matatizo ya kesi yaliyo na makosa yaliyowekwa kwa tathmini inayorudiwa: Takahashi na wenzake (2026) walizalisha matatizo mapya ya mantiki ya uchunguzi ya kiwango cha daraja (HDR) — kesi fupi zinazobeba makosa yaliyowekwa kwa makusudi ambayo wanafunzi wanapaswa kuyatafuta na kueleza — na waligundua kuwa vipengele vilivyoandikwa na GPT-4o vililingana na vile vilivyoandikwa na binadamu katika uthabiti wa ndani (Cronbach's α = 0.78 kwa vyote viwili) na ugumu, na majaribio sahihi ya Fisher hawakupata tofauti kubwa ya mgawanyo wa alama kati ya washiriki 100. Muundo huu huchanganya mahitaji ya kufikiri cha kiwango cha juu na jibu lililozuiwa, ili majibu yakusanyike na upimaji uwe wa kurudiwa. Motisha ya uzalishaji ni matumizi tena ya vipengele: kutumia tena kesi moja kualika kumbukumbu na matumizi tena ya majibu, wakati kesi zilizozalishwa zilizo sawa kwa muundo lakini tofauti kwa muktadha zinazuia upendeleo wa kipengele katika kupima upya.
  • Mtiririko wa kitaaluma: Uundaji wa maswali na majibu ya slaidi hutumia mtiririko wa awamu nyingi kwa uundaji wa maswali wenye msingi wa kitaaluma kutoka nyenzo za kozi.
  • Uundaji unaozingatia upatikanaji: Chen na wenzake wanabuni mfumo wa uundaji wa maswali unaoendeshwa na LLM kwa wanafunzi Wasio na Uwezo wa Kusikia na Wenye Ulemavu wa Kusikia, wakileta mikakati ya maswali ya Kuona na Hisia yanayolenga nyakati za ugumu wa kuona au hisia katika video, na kuboresha maswali kwa njia ya kurudiwa pamoja na jamii inayolengwa ili kuhakikisha upatikanaji wa lugha.
  • Mifumo ya RAG inayoshirikisha binadamu: CODE-GEN inachanganya uzalishaji unaoongozwa na urejeshaji na ukaguzi wa binadamu katika mzunguko kwa kuzalisha tathmini za chaguo-nyingi.
  • Vipimo vya viwango na tathmini: NSMQ Riddles hutoa kiwango cha vitu vya kupiga kitendawili vya kisayansi/hisabati kwa kutathmini mifumo ya uundaji wa maswali na mantiki.

Uthibitishaji na ubora

Changamoto kuu katika AQG ni udhibiti wa ubora:

  • Pima mchakato wa kutatua, si mstari wa msingi: ProIQA inadai kuwa ukaguzi wa ubora wa kipengele unapaswa kufuata kile mtaalamu hufanya — kuiga suluhisho — na inajenga mti wa mantiki uliozalishwa na LLM kwa kila kipengele, uliothibitishwa kwa usahihi wa kihisabati kwa 90.38–97.80%, kisha inaweka muundo wake wa utegemezi na mtandao wa neva wa mfano wa mti pamoja na mtazamo wa mstari wa msingi pekee. Inaripoti mazao ya wastani juu ya mbinu ya pili bora ya 7.5% katika tathmini ya dhana, 6.3% katika makadirio ya ugumu na 19.5% katika tathmini ya uwezo, na uchanganuzi wake wa makosa unataja hali ya kushindwa inayostahili kuzingatiwa: mti wa mantiki wenye mantiki sahihi lakini mdogo kwa muundo unaifanya kipengele ngumu kuonekana rahisi.
  • Hatari ya mawazo yasiyo sahihi: LLM zinaweza kuzalisha maswali yasiyo sahihi kwa ukweli. Generate-Then-Validate inaonyesha kuwa awamu maalum ya uthibitishaji inapunguza hii kwa kasi, na hatari ya mawazo yasiyo sahihi ni wasiwasi unaotambulika kila mahali.
  • Urekebishaji wa ugumu: maswali yaliyozalishwa yanapaswa kurekebishwa kwa ugumu unaofaa. Utafiti wa urekebishaji wa ugumu unaonyesha kuwa makadirio ya ugumu ya AI yanahusiana kwa nguvu na utendaji wa mwanafunzi (kwa mfano, rho ≈ −0.87), na kuwezesha uteuzi bora wa vipengele — huku ukionya dhidi ya matumizi mabaya ya hatua kuu. Razavi na Powers (2026) wanapanua hii kwa vipengele vya hisabati na kusoma vya K-5 (N = 5170) vilivyorekebishwa chini ya mfano wa IRT wa Rasch: ukadiriaji wa ugumu wa hatua-moja wa GPT-4o ulihusiana kwa kiwango cha wastani-hadi-kuu na ugumu halisi (r = 0.83 hisabati, r = 0.81 kusoma) lakini ulitofautiana kwa darasa, wakati mbinu inayotegemea vipengele — vipengele vya kiutambuzi na lugha vilivyotolewa na LLM na kuliwa katika mifano ya mti — ilifikia uhusiano hadi r = 0.87. Utoaji wa vipengele vilivyo na muundo wa utafiti (kwa mfano, ugumu wa sintaksia, mzigo wa kiutambuzi, ugumu wa vitu vya kuchanganya) na mtiririko wake wa vitendo wa hatua saba unatoa kigezo kwa ajili ya kurekebisha vipengele vilivyozalishwa, wakati ugunduzi wake wa kizuizi cha kiwango cha madarasa ya chini na maelezo ya uwezo wa kueneza yanaonya dhidi ya matumizi ya hatua kuu.
  • Lebo za ugumu zilizozalishwa zinaweza kuwa kushindwa kwa uhalali wa muundo, si kosa la urekebishaji. Katika vipengele 378 vilivyozalishwa, lebo za Rahisi/Wastani/Ngumu za mfumo zilifuata kiwango cha Bloom kilichozalishwa pamoja nazo (ρ=0.90) na muundo wa nje - urefu wa wastani wa mstari wa msingi ukizidi kutoka 15.9 hadi 22.1 hadi 30.2 maneno - lakini zilihussiana na ugumu wa kipengele wa uchunguzi kwa ρ=0.06 tu juu ya majibu 7,888 kutoka kwa wanafunzi 54, hali ya kurekebisha metadata iliyozalishwa dhidi ya data ya majibu badala ya kuamini lebo zilizozalishwa pamoja (An na Wang (2026)).
  • Uthibitishaji wa kisaikolojia wa shamba kwa kiwango kikubwa: Kutathmini Mitihani Iliyozalishwa na AI inathibitisha mtiririko wa AQG wa uboreshaji unaorudiwa (zalisha→amua→rekebisha, mtindo wa Self-Refine) katika madarasa 91 halisi ya chuo kikuu (~wanafunzi 1,686). Uchanganuzi wa IRT wa 2PL wa daraja la Bayesian unaonyesha kuwa maswali yaliyozalishwa na AI yanafanya kazi sawa na vipengele vya mitihani iliyoandikwa na wataalam — rahisi zaidi kwa kiasi (β̄ = −0.45 dhidi ya 0.35) lakini kinatofautisha zaidi kidogo (ᾱ = 1.3 dhidi ya 1.2), na taarifa za juu zaidi za mlima wa mtihani (uaminifu 0.79 dhidi ya 0.72) — ikionyesha kuwa AQG inaweza kuzalisha tathmini zinazofaa kwa kozi na zenye msingi wa kisaikolojia kwa kiwango kikubwa.
  • Uwiano wa wastani wa kisaikolojia unaweza kuficha upungufu wa kiwango cha kipengele: ukaguzi wa upeo wa ripoti 153 za elimu ya tiba uligundua kuwa uzalishaji wa vipengele na AI nyakati fulani ulilingana na ugumu na utofautishaji wa binadamu, lakini katika ulinganishi mmoja wa fiziolojia ni vipengele 9 tu katika 40 vilivyozalishwa na ChatGPT vilivyotimiza vigezo vyote bora dhidi ya vipengele 19 katika 40 vya wanafunzi wa tiba (Zhao na wenzake (2026)).
  • Kutambulika katika mtihani wa moja kwa moja, na kile ukaguzi unaondoa hasa: Vogt na wenzake (2026) waliweka maswali 30 ya MCQ yaliyozalishwa na AI na 30 ya Mtihani wa Kitaifa wa Leseni katika mtihani wa kibao uliopimwa unaochukuliwa na wanafunzi 119 wa mwaka wa tano wa elimu ya tiba, na vipengele vya AI vilizaliwa kutoka nyenzo za kozi yenyewe na ChatGPT-4o na Gemini 1.5 Pro kupitia jopo la wataalamu lililikubali 82% yake na kuondoa 18.2% kama visivyoweza kutumika. Ugawaji wa vyanzo kwa wanafunzi haukutofautiana kati ya aina mbili za kipengele, na ugumu wa kipengele, mgawanyo wa vitu vya kuchanganya na ulinganifu unaoonekana wa mtaala vilikuwa visivyo na tofauti ya kihisabati — matokeo ya kutambulika badala ya matokeo ya ubora, na sababu ni kwamba waandishi wanaelezea faida ya mtiririko kama kusogeza juhudi za mwalimu kutoka kuandaa kwenda kukagua badala ya kuiondoa. Tofauti moja ya uchunguzi ilidumu: vipengele vya Gemini vilikuwa vigumu kuliko vipengele vya mtihani wa leseni (p = 0.028), wakati vipengele vya ChatGPT havikuwa (p = 0.984).
  • Kutegemea kazi: uaminifu wa uzalishaji unatofautiana na aina ya kipengele. Upimaji wa majibu mafupi na tathmini ya uandishi wa kielelezo zinaonyesha kuwa vipengele vya jibu-wazi na uandishi ni vigumu kuzalisha na kupima kwa uaminifu kuliko vipengele vilivyo na muundo.
  • Ubora wa kiutambuzi: tathmini ya kina cha kiutambuzi inaonyesha kuwa vipengele vilivyozalishwa vinaweza kuelekea kwenye kufikiri cha kiwango cha chini isipokuwa yameundwa wazi kwa matokeo ya kiwango cha juu.
  • Kuweka lebo kiotomatiki kwa kiwango cha kiutambuzi hahamishi hadi vipengele vilivyozalishwa. Kigezo cha uainishaji wa uainishaji wa Bloom kilichofunzwa kwenye benki ya vipengele iliyochaguliwa kilishindwa kwenye maswali yaliyozalishwa na AI — macro F1 kutoka 0.88 katika usambazaji hadi 0.48 na 0.20 nje yake — kwa sababu vipengele vilivyozalishwa vina maneno mengi zaidi kwa wastani (18.2 dhidi ya 9.3) na vinashiriki median 10.5% tu ya vitenzi vyao vya kichochezi vya Bloom na mkusanyiko uliochaguliwa, dhidi ya 35.1% kwa seti iliyo karibu zaidi; kufunza upya kwa data iliyowekewa lebo ya nje ya usambazaji ilikuwa faida moja kubwa zaidi, kwa kizingiti cha karibu N > 1,000 sampuli zilizowekewa lebo (Castanares na wenzake, 2026).

Jukumu katika kujifunza kwa kubadilika na kibinafsi

AQG ni kiwezeshaji muhimu cha kujifunza kwa kubadilika na kibinafsi: inazalisha benki kubwa za vipengele ambazo walezi wanaobadilika huchukua kutoka humo, na — ikiwa imechanganywa na ufuatiliaji wa maarifa au ubunifu wa mwanafunzi — inaweza kuzalisha vipengele vilivyorekebishwa kulingana na hali za maarifa za wanafunzi binafsi (KT4EQG). Ubinafsishaji unaotegemea masilahi unaonyesha kuwa AQG inaweza pia kurekebisha maswali kulingana na masilahi ya mwanafunzi, si ugumu tu.

Athari kwa AI katika elimu

  • Zalisha kisha thibitisha: changanya kila wakati uzalishaji na awamu ya uthibitishaji/uboresho ili kudhibiti mawazo yasiyo sahihi na kuhakikisha uhusiano.
  • Linganisha aina ya kipengele na uaminifu: tumia AQG kwa aina za vipengele vilivyo na muundo (MCQ, jaza-nafasi, kodi) ambapo inaaminika zaidi, na tumia uthibitishaji wa makini kwa vipengele vya jibu-wazi na uandishi.
  • Buni kwa kina cha kiutambuzi: ilani na mitiririko vinapaswa kulenga kufikiri cha kiwango cha juu, si kukariri tu, ili kusaidia kujifunza halisi.
  • Rekebisha ugumu: tumia makadirio ya ugumu ya AI kuteua vipengele vyenye changamoto inayofaa, na uthibitishaji mkubwa kabla ya matumizi ya hatua kuu.
  • Binafsisha kupitia mifano ya mwanafunzi: changanya AQG na ufuatiliaji wa maarifa na mifano ya masilahi ili kuzalisha vipengele vinavyobadilika na vya kibinafsi.

Dhana Zinazohusiana

Makala Zinazohusiana

Rasilimali Zilizounganishwa

  • TeacherServer
    Maktaba kubwa ya bure ya vizalishaji vya kufundisha vilivyo na kusudi moja — mipango ya masomo, karatasi za kazi, malengo ya IEP, rubriki, masomo ya kesi, maswali ya hisabati — kwa walimu wa K-12 na wataalam wa chuo kikuu.

Pachika ukurasa huu

Nakili msimbo ulio hapa chini ili kupachika ukurasa huu katika mfumo wa usimamizi wa kujifunza au tovuti nyingine. Toleo lililopachikwa linaonyesha maudhui ya ukurasa tu — linaficha kichwa cha tovuti, urambazaji, na kijachini.