هوش مصنوعی در تصحیح امتحانات چه کمکی می‌کند و نقش معلم چیست؟

پرسش مدرسه معمولاً این است که ابزار تا کجای تصحیح را می‌تواند انجام دهد و کجا باید معلم تصمیم بگیرد. پاسخ را می‌توان با یک آزمون کوچک پیدا کرد. معیار موفقیت فقط شباهت نمره کل نیست. باید بدانید ابزار کدام پاسخ‌ها را درست خوانده، در کدام معیارها اشتباه کرده و بررسی و اصلاح آن‌ها چقدر وقت معلم را گرفته است.

چه کارهایی را می‌توان به ابزار سپرد؟

ابزار می‌تواند برای پاسخ‌هایی که خوانا هستند و بارم‌بندی روشنی دارند، یک پیشنهاد اولیه بدهد. همچنین می‌تواند سؤال، پاسخ و معیارها را کنار هم نشان دهد تا معلم سریع‌تر به شاهد لازم برسد. برای کلاس، دسته‌بندی پاسخ‌ها برحسب سؤال می‌تواند پیدا کردن خطاهای تکراری را ساده‌تر کند. ارزش هر کدام به شیوه تدریس، کیفیت برگه‌ها و روش بازبینی مدرسه بستگی دارد. برای شروع، یک کار مشخص انتخاب کنید؛ مثلاً یافتن مواردی که نمره جزئی گرفته‌اند و بازبینی دلیل آن‌ها.

چه نوع خطاهایی را باید جدا بررسی کرد؟

یک ابزار ممکن است برای دو پاسخ شبیه پیشنهاد متفاوت بدهد. همچنین ممکن است پیشنهاد درست باشد ولی دلیل آن بخشی از پاسخ را اشتباه توصیف کند. هنگام ارزیابی، هم عدد و هم دلیل را نمونه‌گیری کنید. مواردی مانند سؤال با شکل، دست‌خط کم‌رنگ و پاسخ چندصفحه‌ای را جداگانه بسنجید تا میانگین کل مسئله را پنهان نکند.

معلم در چه سه نقطه تصمیم می‌گیرد؟

پیش از تصحیح. معلم هدف سؤال، پاسخ‌های قابل قبول و سهم هر معیار را مشخص می‌کند. اگر هدف سؤال بررسی روش حل است، نمره نتیجه و روش باید جدا تعریف شوند.

هنگام بازبینی. معلم متن سؤال، تصویر پاسخ و دلیل پیشنهادی را کنار هم می‌بیند. ابتدا مواردی را که خوانش دشوار یا نمره غیرمنتظره دارند باز می‌کند و چند مورد به‌ظاهر عادی را هم می‌سنجد. اگر خطای مشابه در چند برگه تکرار شده، بررسی را به همان سؤال در بقیه برگه‌ها گسترش می‌دهد.

پیش از اعلام نتیجه. معلم نمره‌های اصلاح‌شده و وضعیت برگه‌های ناقص را دوباره کنترل می‌کند. اگر بازخوردی قرار است به دانش‌آموز برسد، معلم باید ببیند به پاسخ واقعی مربوط است و یک اقدام مشخص برای ادامه یادگیری دارد.

یک آزمون آزمایشی با معیار از پیش تعیین‌شده

برای نمونه، مدرسه ۲۰ برگه را از یک آزمون کوتاه انتخاب می‌کند. چند دست‌خط کم‌خوانا و چند پاسخ با روش جایگزین را عمداً وارد نمونه می‌کند. یک معلم مستقل نمره می‌دهد و سپس پیشنهاد ابزار با آن مقایسه می‌شود. یک برگه ساده برای ثبت داشته باشید:

• پوشش: چند برگه و چند سؤال واقعاً خوانده و پیشنهاد شده‌اند؟
• اختلاف: اختلاف را برای هر سؤال، نه فقط نمره کل، ثبت کنید. آستانه اختلاف مهم را از قبل متناسب با بارم آزمون تعیین کنید.
• منشأ: خوانش، ارتباط با سؤال، قاعده بارم‌بندی یا قضاوت آموزشی؟
• زمان: آماده‌سازی، رفع نقص تصویر، بازبینی و اصلاح چند دقیقه طول کشید؟
• تصمیم: کدام دسته پاسخ‌ها به بازبینی کامل نیاز دارند و اجرای بعدی با چه دامنه‌ای انجام می‌شود؟

اگر یک نوع خطا در همه برگه‌های یک سؤال دیده می‌شود، اول معیار همان سؤال و کیفیت تصویر را بررسی کنید. اگر اختلاف بیشتر روی یک نوع نماد یا برگه کم‌رنگ است، نتیجه را به کل پایه یا همه درس‌ها تعمیم ندهید. ثبت همین تفاوت‌ها به مدرسه کمک می‌کند تصمیم بگیرد ابزار در کدام فرایند مناسب‌تر است.

برای ثبت اختلاف‌ها می‌توانید از جدولی مثل نمونه زیر استفاده کنید. ردیف‌ها ساختگی‌اند.

برای شروع در مدرسه خودتان، راهنمای اجرای آزمایشی در مدرسه را ببینید.

پیش از استفاده از داده‌های مدرسه چه بپرسیم؟

از مسئول سامانه مدرسه بپرسید چه داده‌ای برای تصحیح لازم است، چه افرادی به آن دسترسی دارند، چه مدت نگه داشته می‌شود و درخواست حذف از چه مسیری پیگیری می‌شود. برای نمایش یا آموزش از داده نمونه یا برگه‌ای استفاده کنید که برای همان کاربرد مجاز و بی‌نام شده باشد. اگر محیط آزمایشی است، نام یا تصویر برگه واقعی را در فرم‌های وب‌سایت یا ابزارهای عمومی وارد نکنید.

اگر نمره معلم و ابزار فرق داشته باشد کدام را بررسی کنیم؟

هر دو را با بارم‌بندی و تصویر برگه مقایسه کنید. اختلاف ممکن است نشان دهد صورت سؤال یا راهنمای تصحیح جا برای دو تفسیر داشته است. پاسخ‌های مشابه را هم بررسی کنید تا تصمیم تازه برای همه یکسان اجرا شود.

چگونه اختلاف‌ها را در گزارش آزمایشی توضیح دهیم؟

فرض کنید از ۲۰ برگه، روی ۱۸ برگه پیشنهاد نمره به دست آمده است. اگر فقط از همان ۱۸ برگه صحبت کنید، دو برگه ناقص از تصمیم حذف می‌شوند. در گزارش بنویسید «۱۸ برگه قابل بررسی؛ دو برگه به دلیل تصویر ناقص دوباره وارد شدند» و زمان رفع نقص را هم ثبت کنید. سپس اختلاف‌ها را برای هر سؤال گزارش کنید. مثلاً دو اختلاف مربوط به علامت منفی کم‌رنگ بوده و یک اختلاف به روشی برمی‌گردد که در پاسخ‌نامه به‌عنوان روش معادل نوشته نشده بود.

برای بار دوم همان نوع سؤال را با بارم‌بندی روشن‌تر امتحان کنید. اگر اختلاف روش معادل کمتر شد اما خطای علامت تکرار شد، روی کیفیت تصویر و بازبینی نمادها تمرکز کنید. اگر اختلاف جدیدی پیدا کردید، آن را جدا ثبت کنید. هدف از این مقایسه فهمیدن شرایطی است که ابزار در آن به معلم کمک می‌کند. عددهای یک آزمون کوتاه برای ادعای دقت در کل مدرسه کافی نیستند.

در صورت اعتراض به نمره چه چیزی را نگه داریم؟

برای آزمون‌هایی که امکان اعتراض دارند، معلم باید بتواند نسخه برگه، معیار مورد استفاده و دلیل تصمیم نهایی را پیدا کند. با مسئول آموزشی توافق کنید کدام نسخه از پاسخ‌نامه ملاک بوده و تغییر نمره چگونه ثبت می‌شود. در گفت‌وگو با دانش‌آموز، پاسخ خودش و معیار همان بخش را توضیح دهید. این کار امکان می‌دهد اعتراض بر پایه شاهد بررسی شود. دسترسی به این شواهد را به افراد مسئول محدود کنید و رویه نگهداری را از مدرسه بپرسید.

دیدن مسیر اجرای آزمایشی