Kā studenti visā Teksasā sēž STAAR eksāmenus šonedēļ, viņi būs daļa no ceļa paverinošas jaunas metodes, kā novērtēt štata skolas. Teksasas Izglītības aģentūra (TEA) ir ieviesusi “automatizēto vērtēšanas dzinēju” valsts Teksasas akadēmiskās gatavības novērtēšanas (STAAR) eksāmenu atvērtajiem jautājumiem. Šī tehnoloģija, kas izmanto dabiskās valodas apstrādi un mākslīgā intelekta čatbota tehnoloģiju, pārveidos vērtēšanas procesu, ietaupot štata aģentūrai miljonus dolāru gadā.
Ar labības STAAR testa pārstrādi 2023. gadā papildu atvērtie jautājumi bija izaicinājums vērtēšanā. TEA atzina, ka šo atbilžu manuāla vērtēšana prasīja laiku un bija dārga. Centienos atrisināt šo jautājumu, aģentūra izstrādāja automatizētu vērtēšanas sistēmu, kas imitē cilvēka vērtētājus. Sistēma tika apmācīta uz lauka parauga no 3,000 atbilžu, kas piedzīvoja divas cilvēku vērtēšanas kārtas. Iemācoties šo atbilžu īpatnības, automatizētais vērtēšanas dzinējs var precīzi piešķirt vērtējumus nākotnes studentu iesniegumiem.
Šajos pavasarījos eksāmenos dators vispirms novērtēs visus izstrādātos atbilžu veidus. Tomēr, lai nodrošinātu precizitāti, ceturksni no atbilžu būs jāpārvērtē cilvēkiem. Ja datoram ir zema paļāvība uz piešķirto vērtējumu vai gadās atbilde, ko tas neatzīst, tas automātiski pārsūtīs atbildi cilvēka vērtētājam turpmākai novērtēšanai.
TEA uzsver, ka ar cilvēku vērtētājiem ieviestie kvalitātes kontroles procesi paliks vietā ar automatizēto vērtēšanas sistēmu. Testēšanas administratori katru dienu pārskatīs rezultātu kopsavilkumu, lai nodrošinātu to atbilstību sagaidāmajam. Turklāt tas, ka atbildes gadījumā tiks nodotas cilvēkiem pārliktai pārskatīšanai, nodrošinās turpmāku vērtēšanas procesa precizitāti un konsistenci.
Lai arī TEA skaidro, ka vērtēšanas dzinējs nav uzskatāms par mākslīgo intelektu, audzinātāju un vecāku ir izvirzītas bažas. Daži pedagogi bija pārsteigti par lēmumu ieviest automatizēto tehnoloģiju, un viņi pauda nepieciešamību pēc konsensa un pamatīgas taisnīguma novērtēšanas. Aģentūra tomēr apgalvo, ka vērtēšanas sistēma nav autonoma spējām un pilnībā paļaujas uz saviem sākotnējiem programmējumiem.
Bieži uzdotie jautājumi:
1. Vai automatizētā vērtēšanas sistēma pilnībā aizstās cilvēka vērtētājus?
Nē, automatizētā vērtēšanas sistēma ir izstrādāta, lai asistētu un vienkāršotu vērtēšanas procesu. Lai nodrošinātu precizitāti, ceturksni no atbilžu pārliks cilvēka vērtētāji.
2. Kā tika izstrādāta automatizētā vērtēšanas sistēma?
TEA savāca paraugu no 3,000 atbilžu, kas piedzīvoja cilvēku vērtēšanu. Šīs atbildes tika izmantotas, lai apmācītu automatizēto vērtēšanas dzinēju imitēt cilvēka vērtētājus.
3. Ko darīs dators, ja tas sastaptu atbildi, ko tas neatzīt?
Šādos gadījumos atbilde automātiski tiks nodota cilvēka vērtētājam turpmākai novērtēšanai.
4. Kā tiks uzturēti kvalitātes kontroles procesi ar automatizēto vērtēšanas sistēmu?
Katru dienu pārskati par rezultātu kopsavilkumu testēšanas administrācija un atbilžu gadījuma izlase cilvēkiem pārskatīšanai nodrošinās turpmāku kvalitātes kontroli.
Automatizētas vērtēšanas sistēmas ieviešana izglītības nozarē iezīmē nozīmīgu posmu Teksasas studentu novērtēšanā. Izmantojot tehnoloģijas un mākslīgo intelektu, TEA spēj vienkāršot vērtēšanas procesu, beigu rezultātā ietaupot dārgocas laika un resursus. Lai arī ir izvirzītas bažas, aģentūras apņemšanās nodrošināt uzraudzību un uzturēt kvalitātes kontroles procesus garantē vērtēšanas sistēmas precizitāti un taisnīgumu. Sakarā ar izglītības turpmāku attīstību ir būtiski saglabāt inovatīvus risinājumus, kas uzlabo studentu snieguma novērtēšanu.
Avoti:
texastribune.org
The source of the article is from the blog zaman.co.at