طراحی سؤال تشریحی و پاسخنامه؛ چطور بارم هر مرحله را پیش از آزمون تعیین کنیم؟
سؤال تشریحی روشن و پاسخنامه قابل اتکا بسازید؛ پنج نمونه اصلاح سؤال، بارم هر مرحله، پاسخ ناقص و روش هماهنگی بین دو مصحح را ببینید.
طراحی سؤال تشریحی از این تصمیم شروع می‌شود که چه پاسخی یادگیری دانشجو را نشان می‌دهد. پاسخ طولانی لزوماً فهم عمیق را نشان نمی‌دهد و سؤال کوتاه هم لزوماً ساده نیست. باید روشن باشد دانشجو چه کاری انجام می‌دهد: محاسبه، توضیح، مقایسه، استدلال یا نقد یک پاسخ.
پاسخنامه و بارم را هم‌زمان با سؤال بنویسید. اگر بعد از آزمون تازه تصمیم بگیرید کدام بخش ارزش بیشتری دارد، احتمال ناهماهنگی و تأثیرپذیری از پاسخ‌های اولیه بیشتر می‌شود. پنج نمونه این مقاله فرضی‌اند و برای نشان‌دادن روش طراحی ساخته شده‌اند؛ آن‌ها را با هدف درس و سطح مخاطب تنظیم کنید.
در این مقاله چه می‌خوانید؟
چهار جزء سؤال روشن
نمونه پنجم: تصمیم‌گیری با محدودیت
بازبینی نهایی سؤال و بارم
چهار جزء سؤال روشن
در هر سؤال بگویید مسئله چیست، دانشجو چه کاری باید انجام دهد، چقدر توضیح لازم است و مهم‌ترین شرط پاسخ درست چیست. «درباره نمودار توضیح دهید» روشن نمی‌کند چه توضیحی می‌خواهید.
سؤال دقیق‌تر می‌گوید: «دو مقدار نمودار را با عدد مقایسه کنید و یک نتیجه‌ای را که از این داده نمی‌توان گرفت بنویسید.» اکنون هم دانشجو می‌داند چه تحویل دهد و هم مصحح می‌داند دنبال چه چیزی بگردد.
طول پاسخ را فقط زمانی تعیین کنید که به هدف کمک کند. محدودیت سه جمله می‌تواند از حاشیه‌روی کم کند، اما نباید استدلال لازم را ناممکن کند. اگر نوشتن مهارت اصلی نیست، پیچیدگی زبانی دستور را کاهش دهید. خطای نگارشی را فقط به میزانی در نمره وارد کنید که در معیار اعلام‌شده جای دارد.
نمونه اول: محاسبه همراه با توضیح مسیر
سؤال مبهم: «میانگین را حساب کنید.» نسخه روشن: «زمان انجام یک تمرین در سه نوبت، ۱۰، ۱۴ و ۱۸ دقیقه بوده است. میانگین زمان را حساب کنید، مراحل را نشان دهید و واحد پاسخ را بنویسید.» پاسخ مورد انتظار: مجموع ۴۲، تقسیم بر ۳، نتیجه ۱۴ دقیقه.
بارم پیشنهادی از ۴: جمع درست ۱، انتخاب تقسیم بر تعداد داده‌ها ۱، نتیجه عددی ۱ و واحد ۱. اگر جمع اشتباه اما روش تقسیم درست باشد، امتیاز روش را جدا بررسی کنید. خطای عددی اولیه نباید بدون قاعده مشخص در همه مراحل دوباره جریمه شود. این سیاست را پیش از تصحیح یکسان کنید.
پاسخ ناقص نمونه: «۴۲ تقسیم بر ۳ برابر ۱۴». این سؤال فقط یک پاسخ ندارد، اما روشن است دانشجو چه کارهایی باید انجام دهد و چه نوع پاسخی بدهد؛ بر اساس معیار پیشنهادی ۳ امتیاز می‌گیرد. اگر دانشجو فقط «۱۴ دقیقه» بنویسد، نتیجه درست است ولی روش رسیدن به پاسخ نوشته نشده است؛ امتیاز مربوط به مراحل را نمی‌توان از ذهن مصحح اضافه کرد.
نمونه دوم: مقایسه دو توضیح
سؤال مبهم: «روش‌ها را مقایسه کنید.» نسخه روشن: «برای آموزش واژه تازه، روش الف فقط بازخوانی فهرست است؛ روش ب از یادگیرنده می‌خواهد معنی را بدون نگاه‌کردن به پاسخ به یاد بیاورد و سپس بررسی کند. یک تفاوت در کاری که یادگیرنده انجام می‌دهد و یک شرط لازم برای بازخورد مفید در روش ب بنویسید.»
پاسخ مورد انتظار: در الف پاسخ مقابل فرد است، در ب فرد برای بازیابی تلاش می‌کند؛ پس از تلاش باید پاسخ قابل بررسی یا توضیح اصلاح در دسترس باشد. بارم از ۴: بیان تفاوت رفتاری ۲، شرط بازخورد ۱ و پیوند توضیح با موقعیت سؤال ۱. عبارت کلی «روش ب بهتر است» بدون توضیح، پاسخ کامل نیست.
در پاسخنامه، واژه‌های هم‌معنا را مجاز بدانید. لازم نیست دانشجو عین عبارت مدرس را بازنویسی کند. اگر ایده درست با زبان ساده بیان شده، معیار محتوایی را بر اساس همان ایده بسنجید. حفظ واژه تخصصی فقط زمانی نمره مستقل دارد که خودش هدف اعلام‌شده درس باشد.
نمونه سوم: تفسیر داده و محدودیت نتیجه‌گیری
سؤال: «در یک گروه، ۸ نفر از ۱۲ نفر تمرین اول و ۱۰ نفر از ۱۲ نفر تمرین دوم را کامل کرده‌اند. تغییر تعداد تکمیل‌کنندگان را بنویسید و توضیح دهید چرا از این دو عدد به‌تنهایی نمی‌توان نتیجه گرفت یادگیری همه بهتر شده است.» پاسخ: افزایش دو نفر؛ تکمیل تمرین با کیفیت یادگیری برابر نیست و داده‌ای درباره درستی پاسخ یا اجرای مستقل نداریم.
بارم از ۵: محاسبه تغییر ۱، توضیح اینکه درصد تکمیل دوره چه چیزهایی را نشان نمی‌دهد ۲، گفتن اینکه برای بررسی یادگیری به چه نمونه یا نتیجه‌ای نیاز داریم ۱ و توضیح روشن ۱. پاسخ «چون اطلاعات کافی نیست» بخشی از مسیر را نشان می‌دهد، اما تا زمانی که نوع اطلاعات لازم را مشخص نکند کامل نیست. این تفاوت باید در نمونه پاسخ ناقص پاسخنامه ثبت شود.
نمونه چهارم: نقد یک پاسخ نادرست
سؤال: «دانشجویی نوشته است: اگر مستطیل طول بیشتری داشته باشد، حتماً مساحت بیشتری دارد. یک مثال عددی پیدا کنید که نشان دهد این جمله همیشه درست نیست و دلیل را توضیح دهید.» یک پاسخ ممکن: مستطیل ۱۰ در ۱ مساحت ۱۰ دارد، اما مستطیل ۶ در ۳ مساحت ۱۸ دارد؛ طول بیشتر به‌تنهایی کافی نیست و عرض نیز مؤثر است.
بارم از ۵: انتخاب دو مستطیل مناسب ۲، محاسبه درست دو مساحت ۱، نشان‌دادن نقض ادعا ۱ و توضیح نقش عرض ۱. مثال‌های عددی دیگر که همان شرط را برآورده می‌کنند باید پذیرفته شوند. پاسخنامه نباید تنها اعداد نمونه مدرس را درست بداند.
اگر دانشجو فقط بنویسد «عرض هم مهم است»، ایده اصلی را دیده اما خواسته مثال عددی را انجام نداده است. نمره باید همین تفاوت را نشان دهد. در بازخورد، درخواست مشخص بدهید: «دو مستطیل با طول بیشتر و مساحت کمتر بساز» تا فرد بداند چه چیزی در پاسخ کم است.
نمونه پنجم: تصمیم‌گیری با محدودیت
سؤال: «برای یک کلاس با اینترنت ناپایدار، باید بین ارسال فیلم ۲۰ دقیقه‌ای و ارسال متن کوتاه همراه با سه سؤال، مسیر اصلی مرور را انتخاب کنید. یک گزینه را انتخاب کنید، دو دلیل مرتبط با شرایط بدهید و یک محدودیت انتخاب خود را بنویسید.» پاسخ یگانه اجباری نیست؛ دانشجو باید تناسب گزینه با هدف و دسترسی را توضیح دهد.
بارم از ۶: انتخاب روشن ۱، دو دلیل مرتبط هرکدام ۱٫۵، بیان محدودیت واقعی ۱ و پیشنهاد جبران آن ۱. اگر هدف درس مشاهده حرکت دقیق باشد، دفاع از فیلم کوتاه‌تر یا نسخه قابل دریافت می‌تواند معتبر باشد. پاسخنامه باید پاسخ‌های متفاوتی را بپذیرد که دلیل درست دارند، نه اینکه انتخاب متفاوت را خودکار غلط بداند.
پاسخنامه را فقط از جواب کامل نسازید
برای هر سؤال، یک پاسخ کامل، یک پاسخ ناقص و یک خطای رایج بنویسید. کنار آن‌ها توضیح دهید چه امتیازی و چرا تعلق می‌گیرد. این نمونه‌ها هنگام تصحیح سرعت و ثبات را بیشتر می‌کنند. به‌ویژه در سؤال‌های باز، مرز بین پاسخ مرتبط اما ناکافی و پاسخ بی‌ربط باید روشن باشد.
برای معیارهایی مثل استدلال و توضیح، عبارت «خوب» کافی نیست. بگویید دلیل خوب چه ویژگی‌هایی دارد: از اطلاعات سؤال استفاده می‌کند، نتیجه‌ای که دانشجو نوشته از آن به دست می‌آید و به چیزهایی که اطلاعات سؤال نشان نمی‌دهند هم توجه شده است. راهنمای روبرک تکلیف به تعریف این سطح‌ها کمک می‌کند. روبرک و بارم باید با هم سازگار باشند، نه دو فهرست مستقل با انتظارات متفاوت.
هماهنگی دو مصحح قبل از نمره‌دادن انبوه
چند پاسخ متنوع را بدون دیدن نمره هم تصحیح کنید. سپس اختلاف‌ها را معیاربه‌معیار بررسی کنید. اگر یک نفر به طول پاسخ امتیاز داده و دیگری به تعداد دلیل، مشکل از تعریف معیار است. قاعده را روشن کنید و مثالی بگذارید که تفاوت دو نمرهٔ نزدیک را نشان دهد؛ میانگین‌گرفتن از دو نمره به‌تنهایی ابهام معیار را حل نمی‌کند.
پس از توافق، چند پاسخ قبلی را دوباره با قاعده نهایی بررسی کنید. اگر در میانه تصحیح پاسخ معتبر تازه‌ای پیدا شد، آن را به راهنما اضافه کنید و اثرش بر پاسخ‌های قبلی را بسنجید. تغییر معیار باید یکسان اعمال شود، نه فقط به برگه‌ای که باعث کشف آن شده است.
آزمون آنلاین و زمان پاسخ
زمان را با نوشتن پاسخ نمونه در شرایط نزدیک به مخاطب بسنجید. تایپ در گوشی، بارگذاری عکس و خواندن جدول زمان متفاوتی می‌خواهد. اگر هدف استدلال است، اختلال در ارسال فایل نباید بی‌قاعده به نمره محتوایی تبدیل شود. مسیر تحویل و رسیدگی به مشکل فنی را پیش از آزمون اعلام کنید.
برای هماهنگی سؤال، زمان و آزمون آزمایشی، راهنمای طراحی آزمون آنلاین را ببینید. اگر بخشی از هدف با پاسخ کوتاه بسته بهتر سنجیده می‌شود، می‌توانید قالب‌ها را ترکیب کنید. اصول سؤال چهارگزینه‌ای برای طراحی آن بخش کاربرد دارد؛ طولانی‌ترکردن همه پاسخ‌ها الزاماً آزمون را بهتر نمی‌کند.
از هدفِ یادگیری به سؤال، سپس به بارم برسید
در طراحیِ سؤالِ تشریحی، ترتیبِ کار اهمیت دارد. نخست بنویسید بعد از درس، یادگیرنده باید چه تصمیم یا توضیحی را بتواند ارائه کند. سپس شاهدِ قابل مشاهدهٔ آن را مشخص کنید: محاسبه، مقایسه، انتخابِ راه‌حل یا نقدِ یک ادعا. بعد داده و موقعیتِ سؤال را بسازید و در آخر بارم بدهید. اگر نخست نمرهٔ کل را تعیین کنید و بعد برای پرکردنِ آن چند فعل و شرط به سؤال اضافه کنید، ممکن است یک پرسشِ کوچک به چند هدفِ نامرتبط تبدیل شود. سؤالِ خوب، پاسخِ طولانی را صرفاً به خاطر طولانی‌بودن پاداش نمی‌دهد؛ باید مشخص باشد کدام بخش از پاسخ فهمِ مورد نظر را نشان می‌دهد.
برای مثال، هدفِ درسِ تحلیل نمودار می‌تواند این باشد: «یادگیرنده بتواند از دو مقدارِ یک نمودار، تغییر را حساب کند و بگوید این داده چه نتیجه‌ای را هنوز ثابت نمی‌کند.» پرسشِ متناسب دو کار می‌خواهد، نه مقاله‌ای آزاد دربارهٔ نمودارها. بارم می‌تواند برای خواندنِ درستِ دو مقدار، محاسبهٔ تغییر، ذکرِ واحد و بیانِ محدودیتِ نتیجه‌گیری سهم جدا داشته باشد. اگر محدودیتِ نتیجه‌گیری هدفِ اصلی است، بارم آن نباید آن‌قدر کم باشد که دانشجو با فقط محاسبهٔ عدد تقریباً همهٔ امتیاز را بگیرد. وزنِ جزءها پیامِ آموزشیِ شما دربارهٔ اهمیتِ مهارت‌هاست.
پاسخنامه را با «پاسخِ مرزی» آزمایش کنید
پاسخِ کامل و کاملاً غلط معمولاً آسان‌تر نمره می‌گیرند؛ اختلافِ واقعی در پاسخ‌های مرزی است. برای هر معیار، یک نمونه بنویسید که بخشی از کار را درست انجام داده اما هنوز به حدِ کامل نرسیده است. مثلاً دانشجو دو عدد را درست انتخاب کرده ولی واحد را ننوشته؛ یا تغییر را درست حساب کرده اما از آن علتِ تغییر را با قطعیت نتیجه گرفته است. حالا ببینید در روبریک شما این دو خطا امتیازهای متفاوتی دارند یا هر دو زیر برچسبِ مبهمِ «پاسخ ناقص» پنهان می‌شوند. اگر روبریک نتواند تفاوتِ آموزشیِ این پاسخ‌ها را نشان دهد، پیش از آزمون آن را اصلاح کنید.
بهتر است برای پاسخ‌های معتبرِ متفاوت هم نمونه داشته باشید. در سؤالِ تصمیم‌گیری، دو دانشجو ممکن است گزینه‌های متفاوتی انتخاب کنند، اما هر دو با شواهدِ مرتبط و محدودیتِ واقعی از انتخابشان دفاع کنند. اگر صورتِ سؤال انتخابِ آزاد می‌دهد، پاسخنامه نباید یک گزینهٔ پنهان را تنها پاسخِ درست بداند. اگر واقعاً یک گزینه باید انتخاب شود، شرطی را که آن را برتر می‌کند در خودِ سؤال بنویسید. «از نظر شما کدام بهتر است؟» بدون معیار ممکن است بیشتر سلیقه را بسنجد تا فهمِ درس. نمونهٔ مرزی به مصحح کمک می‌کند امتیاز را بر پایهٔ معیار بدهد، نه موافقت با انتخابِ خودش.
خطای ادامه‌دار را فقط یک‌بار و با قاعدهٔ روشن حساب کنید
در مسئلهٔ چندمرحله‌ای، یک خطای اولیه ممکن است به جوابِ نهاییِ غلط منجر شود. فرض کنید دانشجو در جمعِ سه عدد یک واحد خطا کرده، اما روشِ تقسیم بر تعداد، ذکرِ واحد و تفسیرِ نتیجه را درست انجام داده است. اگر همان خطا را در مرحلهٔ جمع و دوباره در نتیجه و بارِ سوم در توضیح جریمه کنید، بارم از سنجشِ مهارت‌ها فاصله می‌گیرد. پیش از آزمون بنویسید کدام مرحله به صحتِ عدد وابسته است و کدام مرحله می‌تواند با عددِ اشتباهِ منتقل‌شده نیز امتیازِ روش بگیرد. این سیاست باید برای همهٔ پاسخ‌ها یکسان اجرا شود.
البته همهٔ خطاهای اولیه قابل چشم‌پوشیِ ادامه‌دار نیستند. اگر دانشجو فرمولی را انتخاب کرده که دقیقاً مفهومِ اصلیِ درس را نشان می‌دهد، ادامهٔ محاسبه با آن فرمولِ غلط نباید همان امتیازِ پاسخِ مفهومیِ درست را بگیرد. تفاوت میان «لغزشِ حساب» و «انتخابِ روشِ نامناسب» را با مثال روشن کنید. در راهنمای مصحح یک پاسخِ نمونه برای هر دو حالت بگذارید. وقتی چند نفر تصحیح می‌کنند، این دو مثال از عبارتِ کلیِ «نمرهٔ روش محفوظ است» دقیق‌ترند و احتمالِ اختلاف را کم می‌کنند.
یک نمونهٔ کاملِ بارم برای نقدِ یک ادعای آموزشی
در یک کارگاهِ تربیتِ مدرس، هدف این است که شرکت‌کننده ادعای آموزشی را با شواهد بررسی کند. سؤالِ نمونه: «یک مدرس می‌گوید چون ۹۰ درصدِ هنرجویان ویدئوی درس را تا آخر دیده‌اند، همهٔ آن‌ها مفهوم را یاد گرفته‌اند. توضیح دهید این داده چه چیزی را نشان می‌دهد، چه چیزی را نشان نمی‌دهد و یک شاهدِ دیگر برای بررسیِ یادگیری پیشنهاد کنید.» در صورتِ سؤال، عدد صرفاً مثالِ فرضی است. هیچ داده‌ای دربارهٔ یک دورهٔ واقعی ادعا نمی‌شود. پاسخِ قابل دفاع باید میان مشاهدهٔ ویدئو و فهمِ محتوا فرق بگذارد؛ ممکن است پیشنهادِ سؤالِ کاربردی، پاسخِ تشریحی یا اجرای یک تمرینِ مستقل را به عنوان شاهدِ تکمیلی مطرح کند.
بارمِ پیشنهادی از شش نمره: یک نمره برای توصیفِ درستِ دادهٔ تماشا، دو نمره برای توضیحِ محدودیتِ نتیجه‌گیری، دو نمره برای پیشنهادِ یک شاهدِ آموزشیِ مناسب و یک نمره برای ارتباطِ روشنِ شاهدِ تازه با مفهومِ مورد نظر. اگر دانشجو فقط بگوید «باید آزمون بگیریم»، بدون توضیح اینکه آزمون چه چیزی را می‌سنجد، شاید بخشی از امتیازِ پیشنهاد را بگیرد، نه همهٔ آن را. اگر بگوید «تماشا هیچ ارزشی ندارد»، دادهٔ موجود را نادرست تفسیر کرده است؛ تماشا می‌تواند نشان دهد دسترسی یا مشارکتِ اولیه رخ داده، هرچند یادگیری را ثابت نمی‌کند. مرزِ این پاسخ‌ها را پیش از تصحیح بنویسید.
برای بازخوردِ پس از آزمون، فقط نمرهٔ ۴ از ۶ کافی نیست. می‌توانید بنویسید: «محدودیتِ آمارِ تماشا را درست دیده‌ای. پیشنهادِ شاهدِ تازه هنوز به مفهومِ درس وصل نیست؛ در نسخهٔ بعد، یک سؤالِ کاربردی بنویس که بتوانیم با پاسخِ آن فهمِ همان مفهوم را ببینیم.» این پیام به دانشجو قدمِ بعد می‌دهد. نمونه‌های بیشتر در راهنمای بازخوردِ تکلیفِ قابل اقدام به چرخهٔ اصلاح پاسخ وصل شده‌اند.
بارم را از دیدِ دانشجو و مصحح هم‌زمان بخوانید
دانشجو پیش از پاسخ باید بداند از او چه می‌خواهید، اما لازم نیست متنِ پاسخِ نمونه را از پیش داشته باشد. یک نسخهٔ دانشجویی با معیارهای روشن بنویسید: «دادهٔ مرتبط را انتخاب کن، دلیلِ انتخاب را توضیح بده و محدودیتِ نتیجه را بگو.» نسخهٔ مصحح می‌تواند مثال‌های پاسخِ کامل، ناقص و نامعتبر و قاعدهٔ خطای ادامه‌دار را نیز داشته باشد. اگر نسخهٔ دانشجویی فقط می‌گوید «پاسخ کامل بدهید» و نسخهٔ مصحح بر ذکرِ یک واحد یا منبعِ خاص تأکید می‌کند، معیارِ مهمی را پنهان کرده‌اید. پیش از اجرا، دو نسخه را کنار هم بگذارید و اختلافِ توقع را اصلاح کنید.
یک همکار یا هنرجویِ آزمایشی می‌تواند صورتِ سؤال را بدون توضیحِ شفاهی بخواند و بگوید چه چیزی باید تحویل دهد. اگر او دربارهٔ تعدادِ دلیل‌ها، واحدِ عدد، قالبِ فایل یا امکانِ استفاده از منبع می‌پرسد، این اطلاعات باید در دستورِ رسمی روشن شوند. اگر سؤال قرار است روی گوشی پاسخ داده شود، جدول یا تصویرِ داخلِ آن را با همان اندازهٔ صفحه ببینید. متنِ سؤال و بارم هر دو ممکن است روی لپ‌تاپ روشن و در گوشی مبهم باشند. آزمونِ عملیِ نمایش، بخشی از کیفیتِ سؤال است، نه صرفاً کارِ فنیِ دقیقهٔ آخر.
با پاسخ‌های واقعی، بارم را بعد از اجرا کالیبره کنید
پس از دریافتِ نخستین چند پاسخ، ممکن است یک مسیرِ معتبر پیدا کنید که در پاسخنامه پیش‌بینی نشده بود. فوراً آن را خطا ندانید. سؤال و معیار را بخوانید: آیا پاسخِ تازه هدفِ یادگیری را با شواهدِ کافی نشان می‌دهد؟ اگر بله، راهنمای مصحح را با یک مثالِ تازه کامل کنید و پاسخ‌های قبلیِ مشابه را دوباره بررسی کنید. اگر نه، دلیلِ رد یا امتیازِ کمتر را به معیارِ مشخص وصل کنید. این بازبینی باید برای همهٔ دانشجویان یکسان باشد؛ تغییرِ پنهانیِ معیار در میانهٔ تصحیح، نمره‌ها را غیرقابل دفاع می‌کند.
اگر تعدادِ زیادی از افراد به یک تفسیرِ غیرمنتظره رسیده‌اند، شاید صورتِ سؤال دوپهلو بوده است. پیش از نسبت‌دادنِ خطا به یادگیری، متن، تصویر و دستورِ مجازبودنِ منبع را بررسی کنید. در سؤالِ مهم، نیاز به اصلاحِ کلید، پذیرشِ دو پاسخ یا تصمیمِ جبرانی ممکن است پیش بیاید؛ این تصمیم را با قاعدهٔ مجموعه و سابقهٔ روشن برای همه اجرا کنید. برای آزمون‌های بعدی، صورتِ سؤال را با همان نمونهٔ مرزی بازنویسی کنید. هدفِ مرورِ پس از اجرا فقط پیدا کردنِ دانشجوی ضعیف نیست؛ خودِ ابزارِ سنجش هم باید بازبینی شود.
هوش مصنوعی را برای پیش‌نویس به کار ببرید، نه داوریِ پنهان
استاد می‌تواند از دستیار هوشمند استاد فاکسیمون برای پیشنهادِ صورتِ سؤال، پاسخ‌های احتمالی و مواردِ مرزی بر اساسِ محتوای مجازِ درس کمک بگیرد. درخواستِ دقیق‌تر چنین است: «از درسِ سوم یک سؤالِ تشریحی دربارهٔ تفسیرِ داده بساز. هدفِ یادگیری، دادهٔ لازم، پاسخِ کامل، یک پاسخِ ناقصِ قابل امتیاز و بارمِ شش‌نمره‌ای را جدا بنویس. اگر پاسخ به اطلاعاتِ خارج از درس نیاز دارد، آن را علامت بزن.» استاد باید تک‌تکِ عددها، پاسخ‌ها، جمعِ بارم و تناسبِ سؤال با سطحِ دوره را بررسی کند. یک بارمِ خوش‌ظاهر که جمعش اشتباه است یا پاسخِ معتبرِ دیگر را نمی‌پذیرد، آمادهٔ انتشار نیست.
برای پاسخِ واقعیِ هنرجویان، حریمِ داده و سیاستِ مجموعه را رعایت کنید. حتی اگر ابزار بتواند متنِ پاسخ را خلاصه کند، نمرهٔ نهاییِ سؤالِ باز و تصمیمِ دارای پیامد باید معیارِ روشن و مسیرِ بازبینیِ انسانی داشته باشد. ابزار ممکن است از یک واژهٔ آشنا نتیجه بگیرد که دانشجو مفهوم را فهمیده، در حالی که استدلالِ او نادرست است؛ یا پاسخِ درست با عبارتِ متفاوت را کم‌ارزش بداند. ابتدا با نمونه‌های ساختگی و بی‌نام، کیفیتِ پیش‌نویسِ روبریک را آزمایش کنید. زمانِ استاد وقتی واقعاً آزاد می‌شود که بازبینیِ خطاها کمتر از نوشتنِ از صفر باشد و کیفیتِ سنجش افت نکند.
پیش از انتشار، سؤال را در مسیرِ واقعیِ آزمون ببینید
پاسخنامهٔ دقیق در فایلِ استاد کافی نیست. سؤال را در همان محیطی که هنرجو می‌بیند وارد کنید و یک بار با نقشِ آزمایشی پاسخ بدهید. جدول، علامتِ منفی، واحدها و ترتیبِ راست‌به‌چپِ عدد و متن را کنترل کنید. ببینید پاسخِ تشریحی در گوشی به‌راحتی ثبت می‌شود و در صورتِ قطعِ ارتباط، رفتارِ سامانه برای کاربر روشن است. اگر قرار است تصویرِ پاسخ بارگذاری شود، محدودیتِ فایل و مهلت را پیش از آزمون توضیح دهید. پس از ثبتِ آزمایشی، پاسخ را از دیدِ مصحح باز کنید و بررسی کنید آیا بخش‌های لازم خوانا هستند.
برای طراحیِ کامل‌تر، راهنمای مادر سنجش یادگیری آنلاین را کنار صورتِ سؤال و بارم بگذارید. اگر می‌خواهید دوره و آزمونِ خود را در یک فضای آموزشی اجرا کنید، در فاکسیمون ثبت‌نام کنید و امکاناتِ فعالِ حسابِ خود را با یک سؤالِ آزمایشی بررسی کنید. نقطهٔ شروعِ خوب، یک سؤالِ روشن با پاسخنامهٔ قابل دفاع است؛ نه فهرستی بلند از پرسش‌هایی که هنوز کسی پاسخِ مرزیِ آن‌ها را ندیده است.
بازبینی نهایی سؤال و بارم
فعل سؤال با مهارت مورد انتظار هماهنگ است.
داده لازم داخل سؤال یا منبع مجاز وجود دارد.
پاسخنامه، پاسخ‌های معتبر متفاوت را می‌پذیرد.
جمع بارم جزءها دقیقاً با نمره سؤال برابر است.
قاعده خطای ادامه‌دار و واحدها مشخص است.
نمونه پاسخ ناقص برای معیارهای مهم آماده است.
زمان تحویل و روش ارسال پیشاپیش آزموده شده است.
آیا جواب بلندتر باید نمره بیشتری بگیرد؟
فقط اگر طبق معیار، دلیل‌ها یا نمونه‌های مرتبط بیشتری آورده باشد. تکرار یک دلیل با چند عبارت، چند دلیل مستقل محسوب نمی‌شود. پاسخ کوتاه و کامل باید بتواند نمره کامل بگیرد.
آیا غلط املایی از نمره کم می‌کند؟
به هدف و معیار اعلام‌شده بستگی دارد. در آزمون نگارش ممکن است معیار مستقل باشد؛ در آزمون یک مفهوم علمی، مشخص کنید اشتباه نگارشی چه زمانی باعث نامفهوم یا نادرست‌شدن پاسخ می‌شود و چقدر روی نمره اثر دارد. قاعده را پیش از آزمون بنویسید و برای همه یکسان اجرا کنید.