همانطور که دانش‌آموزان در سراسر تگزاس برای امتحانات STAAR خود در این هفته نشسته‌اند، آن‌ها بخشی از یک روش نوآورانه برای ارزیابی مدارس این ایالت خواهند بود. وزارت آموزش تگزاس (TEA) یک “موتور امتیازدهی خودکار” برای سوالات باز در امتحانات State of Texas Assessment of Academic Readiness (STAAR) معرفی کرده است. این تکنولوژی، که از پردازش زبان طبیعی و تکنولوژی چت‌بات هوش مصنوعی استفاده می‌کند، فرآیند امتیازدهی را انقلابی کرده و به این وزارت‌خانه میلیون‌ها دلار پس‌انداز می‌کند.
در آزمون‌های به‌ارتقای STAAR در سال 2023، اضافه شدن سوالات بیشتر باز مشکلاتی را در امر امتیازدهی ایجاد کرد. TEA متوجه شد که امتیازدهی دستی به این پاسخ‌ها وقت‌گیر و پرهزینه است. برای حل این مشکل، این وزارت‌خانه یک سیستم امتیازدهی خودکار توسعه داد که امتیازدهی انسانی را شبیه‌سازی می‌کند. این سیستم بر روی یک نمونه میدانی از 3,000 پاسخ آموزش دیده بود که دو دور امتیازدهی انسانی را پشت‌سر گذاشته بود. با یادگیری ویژگی‌های این پاسخ‌ها، موتور امتیازدهی خودکار می‌تواند به صورت دقیق امتیازها را به ارسال‌های آینده دانش‌آموزان تعلق دهد.
در این آزمون‌های بهاری، کامپیوتر ابتدا تمامی پاسخ‌های ساخته‌شده را امتیازدهی خواهد کرد. با این حال، برای تضمین دقت، یک چهارم از پاسخ‌ها توسط انسان‌ها دوباره امتیازدهی خواهند شد. اگر کامپیوتر اطمینان پایینی از امتیاز اختصاصی خود داشت یا با یک پاسخ روبرو شد که نمی‌شناسد، پاسخ را به صورت خودکار به یک امتیازدهنده انسانی برای ارزیابی بیشتر ارجاع خواهد داد.
TEA تأکید دارد که فرآیندهای کنترل کیفیتی که به وسیله امتیازدهندگان انسانی پیاده‌سازی شده‌اند با سیستم امتیازدهی خودکار در جای خواهد بود. مدیران آزمون هر روز یک خلاصه از نتایج را بررسی خواهند کرد تا اطمینان حاصل شود که با انتظارات همخوانی دارند. به علاوه، یک نمونه تصادفی از پاسخ‌ها به انسان‌ها برای بررسی تحویل داده خواهد شد تا عیبی از دقت و سازگاری فرآیند امتیازدهی تضمین شود.
به گفته TEA، موتور امتیازدهی به عنوان هوش مصنوعی محسوب نمی‌شود، اما نگرانی‌ها توسط معلمان و والدین ابراز شده است. برخی از معلمان از تصمیم به پیاده‌سازی فناوری خودکار متعجب شدند و نیاز به مشورت و ارزیابی دقیقتر از عدالت آن را بیان کردند. با این حال، وزارت‌خانه اقرار دارد که سیستم امتیازدهی توانایی‌های خودگردان را ندارد و تنها بر نرم‌افزار اصلی خود اعتماد دارد.
درباره‌ی امتیازدهی خودکار پرسیده شده
1. آیا سیستم امتیازدهی خودکار کاملاً امتیازدهندگان انسانی را جایگزین می‌کند؟
نه، سیستم امتیازدهی خودکار برای کمک به فرآیند امتیازدهی طراحی شده است. یک چهارم از پاسخ‌ها هنوز توسط امتیازدهندگان انسانی برای اطمینان از دقت مورد امتیاز قرار خواهند گرفت.
2. چگونه سیستم امتیازدهی خودکار توسعه یافت؟
TEA یک نمونه از 3,000 پاسخ جمع‌آوری کرد که امتیازدهندگان انسانی بر روی آن‌ها امتیازدهی انجام دادند. این پاسخ‌ها سپس برای آموزش موتور امتیازدهی خودکار به کار گرفته شدند تا امتیازدهی به شکل انسانی انجام شود.
3. چه اتفاقی می‌افتد اگر کامپیوتر به یک پاسخی برخورد کند که نمی‌شناسد؟
در چنین مواردی، پاسخ به صورت خودکار به یک امتیازدهنده انسانی برای بررسی بیشتر ارجاع خواهد شد.
4. چگونه فرآیندهای کنترل کیفیت با سیستم امتیازدهی خودکار حفظ خواهند شد؟
بررسی‌های روزانه از نتایج خلاصه توسط مدیران آزمون و نمونه تصادفی از پاسخ‌ها برای بررسی انسانی تضمین کنترل کیفیت پیگیری خواهند شد.
پیاده‌سازی سیستم امتیازدهی خودکار نقطه عطف مهمی در ارزیابی دانش‌آموزان تگزاس است. با بهره‌گیری از تکنولوژی و هوش مصنوعی، وزارت آموزش تگزاس قادر به بهبود فرآیند امتیازدهی و در نهایت صرفه‌جویی در زمان و منابع ارزشمند است. هر چند نگرانی‌ها ابراز شده‌اند، تعهد این وزارت‌خانه به نظارت و حفظ فرآیندهای کنترل کیفیت، تضمین دقت و عدالت سیستم امتیازدهی را تضمین می‌کند. این مهم است که همانطور که آموزش ادامه دارد، به راهکارهای نوآورانه که به بهبود ارزیابی عملکرد دانش‌آموزان کمک می‌کنند، پذیرش کنیم.
منابع:
texastribune.org
The source of the article is from the blog reporterosdelsur.com.mx