تصحیح برگه امتحانی با هوش مصنوعی چگونه کار می‌کند؟

وقتی دانش‌آموز راه‌حل را با دست نوشته، نتیجه فقط یک عدد نیست. جای یک علامت منفی، ترتیب مراحل یا ادامه پاسخ در صفحه بعد می‌تواند نمره را تغییر دهد. ابزار تصحیح هوشمند باید ابتدا بفهمد دانش‌آموز چه نوشته، بعد آن را با بارم‌بندی مقایسه کند. معلم هم باید بتواند هر دو مرحله را با نگاه به برگه بررسی کند.

۱. قبل از آزمون مشخص کنید چه چیزی نمره دارد

با یک پاسخ‌نامه شروع کنید که علاوه بر جواب نهایی، مراحل نمره‌دار را مشخص کند. در سؤال ریاضی، ممکن است نوشتن رابطه درست نیم نمره، جای‌گذاری درست نیم نمره و نتیجه یک نمره داشته باشد. اگر دانش‌آموز روش دیگری بلد است، بنویسید هر روشی که همان استدلال را نشان بدهد پذیرفته می‌شود. اگر بارم مبهم باشد، معلم و نرم‌افزار ممکن است درباره همان پاسخ به نتیجه‌های متفاوت برسند. راهنمای بارم‌بندی برای همین مرحله یک الگوی آماده دارد.

۲. برگه را به تصویر قابل بررسی تبدیل کنید

صفحه باید کامل، خوانا و با جهت درست باشد. وقتی از برگه عکس می‌گیرید، دوربین را تا حد امکان موازی کاغذ نگه دارید و از نور یکنواخت استفاده کنید. سایه دست، برش گوشه برگه یا ترتیب اشتباه صفحه‌ها ممکن است باعث شود بخشی از پاسخ دیده نشود. چند برگه اول را قبل از ادامه بررسی کنید و یک مورد چندصفحه‌ای را هم باز کنید. اگر پاسخ در حاشیه نوشته شده یا با پیکان به پشت برگه ادامه یافته، مطمئن شوید تصویر آن قسمت هم وجود دارد.

۳. خواندن پاسخ را از تصمیم درباره نمره جدا کنید

در مرحله خواندن، سامانه تلاش می‌کند متن یا نمادهای نوشته‌شده را از روی تصویر تشخیص دهد. در مرحله نمره‌دهی، برداشت سامانه از پاسخ با پاسخ‌نامه و معیارها مقایسه می‌شود. ممکن است خوانش درست باشد و نمره اشتباه، یا نمره به‌ظاهر درست باشد و بر پایه خوانش اشتباه به دست آمده باشد.

نمونه: دو پاسخ که هر دو نیم نمره کم گرفته‌اند

این نمونه ساختگی است. جواب درست یک سؤال دو نمره‌ای «منفی سه‌چهارم» است و ریزبارم برای روش حل یک نمره، برای جای‌گذاری نیم نمره و برای نتیجه نیم نمره در نظر گرفته است.

برای پاسخ الف باید دوباره به تصویر برگه برگردید و برای پاسخ ب به پاسخ‌نامه. در تصحیح برگه‌های دست‌نویس ببینید تصویر پاسخ، ریزبارم و دلیل نمره پیشنهادی چطور کنار هم نمایش داده می‌شوند. نمونه‌های بیشتری را در خطاهای رایج در تصحیح پاسخ‌های دست‌نویس ریاضی ببینید.

۴. نمره پیشنهادی را با شواهد بررسی کنید

فرض کنید در سؤال «چرا سرعت حرکت دو جسم متفاوت است؟» قرار است دانش‌آموز مسافت، زمان و مقایسه نسبت آن‌ها را توضیح دهد. در یک پاسخ آمده است «جسم اول در زمان برابر مسافت بیشتری طی کرد، پس سریع‌تر است.» اگر هر دو جسم واقعاً زمان یکسان داشته‌اند، همین جمله شواهد کافی برای مقایسه نسبت‌ها دارد، حتی اگر دانش‌آموز تقسیم را ننوشته باشد. اگر صورت سؤال زمان‌ها را متفاوت داده باشد، همان جمله خطای استدلال دارد. پس دلیل پیشنهادی را کنار متن سؤال و پاسخ بخوانید.

اول موارد مبهم یا اختلاف‌دار را بازبینی کنید. بعد چند مورد از پیشنهادهای ظاهراً ساده را هم با برگه اصلی بسنجید. اگر خطایی در یک معیار تکرار شد، دامنه را از همان سؤال به برگه‌های دیگر گسترش دهید. پیش از اعلام نمره، مطمئن شوید برای برگه‌های ناقص یا غایب تصمیم جداگانه گرفته‌اید.

یک برنامه کوچک برای اولین اجرا

یک آزمون کم‌ریسک با چند سؤال تشریحی انتخاب کنید. پیش از شروع، معلم چند برگه خوانا، کم‌خوانا و چندصفحه‌ای را جدا کند و مستقل نمره بدهد. پس از دریافت پیشنهادها، اختلاف‌ها را در سه گروه ثبت کنید. دسته اول خطای تصویر و خوانش است. دسته دوم به تفسیر بارم‌بندی برمی‌گردد. دسته سوم پاسخ درست یا ناقصی است که به قضاوت آموزشی بیشتری نیاز دارد. این تقسیم‌بندی به مدرسه نشان می‌دهد بهبود بعدی باید در عکس‌برداری، پاسخ‌نامه یا شیوه بازبینی انجام شود.

اگر می‌خواهید زمان را مقایسه کنید، آماده‌سازی، وارد کردن برگه، رفع نقص و بازبینی را هم ثبت کنید. فقط زمان پردازش سامانه را با زمان تصحیح دستی مقایسه نکنید. ماشین‌حساب زمان تصحیح برای جدا کردن این مراحل کمک می‌کند. بعد از آزمون، از معلم بپرسید کدام نوع پاسخ بیشترین وقت بازبینی را گرفت و همان مورد را در اجرای دوم دوباره اندازه بگیرید.

اگر نمره کامل پیشنهاد شود، باز هم لازم است برگه بررسی شود؟

نمره کامل می‌تواند درست باشد، اما خودش دلیل درستی نیست. در اولین اجرا و در آزمون‌های مهم، نمونه‌ای از برگه‌های با نمره کامل را هم بررسی کنید و اگر خطای تکرارشونده دیدید، بازبینی را گسترش دهید.

آیا پاسخ فارسی، فرمول و شکل به یک اندازه قابل خواندن‌اند؟

کیفیت خوانش به نوع نوشته، وضوح و چیدمان برگه وابسته است. رقم‌های شبیه، علامت‌های کوچک، کسرهای چندسطحی و پیکان‌های کم‌رنگ را جدا بررسی کنید. در نمونه بازبینی می‌توانید چیدمان پاسخ، معیار و نمره را ببینید.

چک‌لیست عکاسی و کنترل اولین دسته

یک نفر مسئول تطبیق تعداد برگه‌ها با فهرست کلاس باشد و یک نفر اولین چند تصویر را روی صفحه‌ای بزرگ‌تر از گوشی باز کند. ترتیب صفحه‌ها را همان‌طور که در آزمون شماره خورده‌اند حفظ کنید. اگر صفحه‌ای پشت‌ورو است، هر طرف دارای پاسخ باید در مجموعه باشد. اگر از یک برگه دوبار عکس گرفته‌اید، قبل از تصحیح نسخه کامل‌تر را پیدا کنید. از روی تصویر کوچک بندانگشتی درباره خوانایی علامت‌ها تصمیم نگیرید.

برای ثبت مشکل، یک جدول ساده کافی است. ستون‌های «کد داخلی برگه»، «شماره سؤال»، «نوع نقص» و «اقدام» را بگذارید. در ستون نوع نقص بنویسید «تصویر تار»، «ادامه پاسخ در صفحه دیگر» یا «کادر پاسخ بریده». مثلاً برای یک علامت توان کم‌رنگ، به جای نوشتن «سامانه اشتباه کرد»، مشخص کنید تصویر تازه لازم بوده یا علامت در تصویر موجود خوانا بوده است. این تفاوت برای بهبود اجرای بعدی مهم است.

در زمان بازبینی یک سؤال محاسباتی، ابتدا جواب خوانده‌شده را با برگه تطبیق دهید. سپس جمله یا خطی را پیدا کنید که دلیل نمره باید به آن استناد کند. اگر دلیل به عبارتی اشاره می‌کند که روی برگه نیست، حتی اگر عدد نمره درست به نظر برسد، آن مورد را برای بررسی مشخص کنید.

دیدن نمونه بازبینی برگه