طبقه‌بندی بلوم و هوش مصنوعی؛ سؤال حفظی را چگونه به تحلیل و ارزیابی تبدیل کنیم؟
با یک مجموعه داده ثابت، تفاوت یادآوری تا خلق را در شش سؤال ببینید و سطح شناختی، دشواری و معیار تصحیح را جدا بررسی کنید.
برای تبدیل سؤال حفظی به سؤال تحلیلی، تغییر فعل کافی نیست. باید کاری را که هنرجو با اطلاعات انجام می‌دهد عوض کنید و برای آن کار شاهد قابل مشاهده بخواهید. «میانگین را تعریف کنید» از بازیابی دانسته‌ها خبر می‌دهد؛ «دو مجموعه با میانگین یکسان را مقایسه کنید و توضیح دهید چرا برای برنامه‌ریزی کلاس نتیجهٔ یکسانی ندارند» به بررسی رابطهٔ داده‌ها نیاز دارد. هوش مصنوعی می‌تواند چند صورت سؤال پیشنهاد کند، اما تشخیص سطح واقعی، مناسب‌بودن برای کلاس و درستی پاسخ با مدرس است.
این راهنما برای مدرسی است که می‌خواهد از یک مفهوم واحد، مجموعه‌ای متنوع و قابل دفاع بسازد. مثال اصلی دربارهٔ میانگین زمان آماده‌سازی درس است و همهٔ افراد، عددها و پاسخ‌های نمونه، آموزشی و فرضی‌اند. هدف، معرفی آزمون استاندارد یا برچسب‌زدن به توانایی افراد نیست. با همان دادهٔ کوچک نشان می‌دهیم چگونه از یادآوری به فهم، کاربرد، تحلیل، ارزیابی و خلق برسیم و کجا یک سؤال ظاهراً پیشرفته هنوز فقط حافظه را می‌سنجد.
بلوم را نقشهٔ تصمیم ببینیم
در نسخهٔ بازنگری‌شدهٔ طبقه‌بندی بلوم، فرایند شناختی با شش عنوان یادآوری، فهمیدن، به‌کاربستن، تحلیل، ارزیابی و خلق توصیف می‌شود. این نام‌ها برای هماهنگ‌کردن هدف، فعالیت و سنجش مفیدند. راهنمای دانشگاه ایالتی آیووا نیز کاربرد طبقه‌بندی را به طراحی آموزش و ارزیابی پیوند می‌دهد. لازم نیست هر آزمون کوتاه، سهم مساوی از هر شش عنوان داشته باشد.
اگر هدف جلسه تشخیص واحد زمان و محاسبهٔ یک میانگین ساده است، سؤال یادآوری و کاربرد می‌تواند مناسب باشد. درخواست طراحی پژوهش پیچیده از کسی که هنوز دقیقه و ساعت را مخلوط می‌کند، لزوماً آموزش بهتری نیست. از سوی دیگر، اگر نتیجهٔ دوره «انتخاب روش مناسب گزارش داده» است، امتحانی که فقط تعریف‌ها را می‌پرسد نتیجهٔ وعده‌داده‌شده را نشان نمی‌دهد. ارزش طبقه‌بندی در آشکارکردن این فاصله است.
پیش از استفاده از دستیار، نتیجهٔ یادگیری را به جمله‌ای قابل بررسی تبدیل کنید. برای مثال بنویسید: «هنرجو می‌تواند برای برنامه‌ریزی زمان مدرس، دادهٔ چند جلسه را خلاصه کند، یک محدودیت گزارش را توضیح دهد و تصمیمش را با داده پشتیبانی کند.» سپس بپرسید در پایان چه محصولی می‌بینیم: عدد، توضیح، جدول مقایسه یا پیشنهاد اجرا؟ نام یک سطح، جای این تصمیم را نمی‌گیرد.
فعل سؤال با کار واقعی تفاوت دارد
فهرست فعل‌ها برای شروع ایده می‌دهد، اما بدون دیدن ورودی و پاسخ مورد انتظار، سطح را تعیین نمی‌کند. «تحلیل کنید که میانگین چیست» اگر با بازگویی یک جملهٔ کتاب جواب داده شود هنوز تحلیل داده نیست. «نام ببرید کدام گزارش گمراه‌کننده است» ممکن است پشت ظاهر کوتاهش، مقایسهٔ دو گزارش و استفاده از یک معیار را بخواهد. طول پاسخ و تعداد اصطلاح‌های علمی هم معیار مستقلی برای شناخت نیستند.
برای بررسی هر سؤال سه چیز را کنار هم بنویسید: هنرجو چه اطلاعاتی دارد، باید چه تبدیلی انجام دهد و چه شاهدی تحویل می‌دهد. در سؤال محاسباتی، تبدیل می‌تواند استفاده از قاعده روی دادهٔ تازه باشد. در تحلیل، باید رابطه یا ساختار آشکار شود. در ارزیابی، معیار داوری لازم است. در خلق، پاسخ باید اجزایی را در یک طرح قابل اجرا ترکیب کند؛ صرف تولید متن طولانی کافی نیست.
دستیار ممکن است سؤالی با فعل «ارزیابی کنید» بسازد و زیر آن پاسخ قطعی یک‌خطی بدهد. این ناسازگاری فرصت خوبی برای بازبینی است. از او نخواهید فقط برچسب را اصلاح کند؛ بخواهید توضیح دهد کدام بخش پاسخ، استفاده از معیار را نشان می‌دهد. اگر چنین بخشی وجود ندارد، یا صورت سؤال را تغییر دهید یا آن را صادقانه در سطح دیگری قرار دهید. هدف پرکردن شش خانه نیست.
بستهٔ منبع مثال را پیش از تولید آماده کنیم
برای نمونهٔ این مقاله، یک آموزشگاه فرضی زمان آماده‌سازی سه جلسه را ثبت کرده است: سی، چهل و پنجاه دقیقه. در این مثال، میانگین حسابی از جمع مقدارها و تقسیم بر تعداد مشاهده‌ها به دست می‌آید؛ بنابراین جمع برابر صدوبیست و میانگین برابر چهل دقیقه است. همهٔ اندازه‌گیری‌ها دقیقه‌اند و زمان اجرای کلاس در این عددها نیست. همین مرز کوچک، از چند پاسخ اشتباه جلوگیری می‌کند.
بستهٔ منبع مدرس بهتر است تعریف مفهوم، دادهٔ معتبر، واحد، دامنهٔ نتیجه و خطای مورد انتظار را داشته باشد. اینجا خطاهای مورد انتظار عبارت‌اند از تقسیم جمع بر عددی غیر از تعداد جلسه‌ها، مخلوط‌کردن زمان آماده‌سازی و تدریس، و نتیجه‌گیری دربارهٔ همهٔ مدرس‌ها از سه مشاهده. به دستیار نگویید «از آمار سؤال بساز»؛ این محدودیت‌ها را همراه منبع بدهید تا خروجی به همان مسئله متصل بماند.
برای نگهداری نسخهٔ نخست، یک نام روشن مثل «زمان آماده‌سازی، نمونهٔ آموزشی الف» کافی است. اگر بعداً عددی را عوض می‌کنید، پاسخ‌ها و بازخوردهای وابسته هم باید دوباره بررسی شوند. تولید سریع شش سؤال به معنی استقلال شش کلید از یکدیگر نیست. یک اشتباه در دادهٔ پایه می‌تواند همهٔ سطح‌ها را ظاهراً مرتب و در واقع ناسازگار کند. مدرس باید یک نسخهٔ مرجع برای بسته داشته باشد.
سؤال اول یادآوری با دامنهٔ محدود
صورت پیشنهادی این است: «در محاسبهٔ میانگین حسابی چند مشاهدهٔ هم‌واحد، جمع مقدارها بر چه چیزی تقسیم می‌شود؟ پاسخ را در یک جمله بنویسید.» پاسخ مورد انتظار «تعداد مشاهده‌ها» است. برای این سؤال نیازی به داستان پیچیده، جدول شلوغ یا خواندن متن بلند نداریم. شاهد مناسب، تشخیص جزء اصلی قاعده است. اضافه‌کردن متن نامرتبط، بیشتر توان خواندن را وارد سنجش می‌کند تا مفهوم مورد نظر را.
می‌توان از دستیار دو پاسخ نادرست متداول بخواهیم تا مدرس بازخورد را آماده کند. برای مثال، کسی «بزرگ‌ترین مقدار» را مخرج می‌گذارد و دیگری «تعداد رقم‌های عددها» را می‌نویسد. این پاسخ‌های فرضی برای شناسایی برداشت نادرست‌اند؛ نباید به سابقه یا ویژگی واقعی هنرجو نسبت داده شوند. بازخورد اول می‌تواند توجه او را به تفاوت مقدار مشاهده و شمار مشاهده‌ها برگرداند، بدون آنکه تمام مسئلهٔ بعدی را برایش حل کند.
اگر هنرجو پاسخ را از روی منبع باز پیدا می‌کند، عملکرد هنوز می‌تواند ارزش داشته باشد، اما شرایط را ثبت کنید. سؤال با کتاب باز، از بازیابی بدون کمک خبر یکسانی نمی‌دهد. در گزارش آموزشی بنویسید «قاعده را با مراجعه به راهنما درست تشخیص داد»؛ عبارت کلی «مسلط است» بیش از شاهد موجود ادعا می‌کند. طبقه‌بندی فرایند، جای توصیف شرایط انجام کار را نمی‌گیرد.
سؤال دوم فهمیدن با بازنمایی تازه
صورت دوم این است: «زمان آماده‌سازی سه جلسه سی، چهل و پنجاه دقیقه بوده است. توضیح دهید عدد چهل به عنوان میانگین چه چیزی را خلاصه می‌کند و چه چیزی را دربارهٔ هر جلسه نمی‌گوید.» در پاسخ مناسب، هنرجو توضیح می‌دهد این عدد یک خلاصهٔ حسابی از سه مقدار است؛ از آن نمی‌توان نتیجه گرفت هر جلسه دقیقاً چهل دقیقه آماده‌سازی خواسته است. این بخش دوم، تفاوت تعریف حفظ‌شده و برداشت از کاربرد را آشکار می‌کند.
از هنرجو می‌توان خواست همین معنا را با یک تصویر ساده بیان کند: سه ستون متفاوت و یک خط افقی برای مقدار میانگین. کیفیت نقاشی موضوع نمره نیست؛ رابطهٔ میان خلاصه و مشاهده‌های جدا اهمیت دارد. برای مخاطبی که تصویر را به‌سختی می‌بیند، توضیح متنی معادل باید در دسترس باشد. اگر رسانهٔ پاسخ با هدف ارتباطی ندارد، راه جایگزین تعیین کنید تا مانع ابزار با ندانستن مفهوم اشتباه نشود.
پاسخ ضعیف فرضی «یعنی بیشتر جلسه‌ها چهل دقیقه طول کشیده‌اند» است. این گزاره از سه عدد داده‌شده پشتیبانی نمی‌شود و زمان آماده‌سازی را هم ممکن است با طول کلاس عوض کند. بازخورد مفید می‌پرسد کدام مشاهده‌ها دقیقاً چهل بوده‌اند و منظور از «بیشتر» چیست. دستیار می‌تواند صورت بازخورد را ساده کند، اما مدرس باید تشخیص دهد پاسخ هنرجو به کدام ابهام مربوط است، نه اینکه خطا را از پیش حدس بزند.
سؤال سوم کاربرد روی دادهٔ جدید
برای سنجش کاربرد، داده را عوض می‌کنیم: «یک مدرس فرضی برای چهار درس بیست، سی، چهل و پنجاه دقیقه آماده‌سازی انجام داده است. میانگین را با نمایش مراحل محاسبه کنید و واحد را بنویسید.» جمع صد‌وچهل و تعداد چهار است؛ نتیجه سی‌وپنج دقیقه می‌شود. پاسخ فقط یک عدد نیست. نمایش جمع، انتخاب مخرج و واحد، کمک می‌کند اشتباه محاسبه را از اشتباه مفهوم جدا کنیم.
این سؤال از هنرجو روش تازه‌ای نمی‌خواهد، بلکه قاعدهٔ آموخته‌شده را در مورد جدید به کار می‌برد. اگر دستیار آن را «خلق» نامید چون عددها جدیدند، برچسب را نپذیرید. جدیدبودن داده برای طراح با خلق یک راه‌حل توسط یادگیرنده یکی نیست. برای سطح کاربرد، مسئله باید به اندازهٔ کافی از مثال حل‌شده فاصله داشته باشد که کپی‌کردن خط‌به‌خط، جای انتخاب روش را نگیرد.
در کلید می‌توان دو نوع امتیاز مستقل ثبت کرد: درستی روش و درستی محاسبه. هنرجویی که مخرج درست و جمع اشتباه دارد به اصلاح متفاوتی نسبت به کسی نیاز دارد که جمع را درست اما تقسیم را بر پنج انجام داده است. چنین جداسازی‌ای باید پیش از پاسخ‌ها تعیین شود. استفاده از دستیار برای مرتب‌کردن کلید، مجوز تغییر معیار پس از دیدن نام یا نتیجهٔ افراد نیست.
سؤال چهارم تحلیل با میانگین یکسان
دو مجموعهٔ فرضی تعریف می‌کنیم. در مجموعهٔ الف، زمان‌ها سی، چهل و پنجاه دقیقه‌اند. در مجموعهٔ ب، ده، چهل و هفتاد دقیقه‌اند. میانگین هر دو چهل است. سؤال این است: «با تکیه بر مقدارهای هر مجموعه، توضیح دهید چرا یک برنامه‌ریز ممکن است برای زمان ذخیرهٔ آماده‌سازی آن‌ها تصمیم متفاوتی بگیرد. دست‌کم دو شاهد از داده بیاورید.» هنرجو باید از میان خلاصه و الگوی پراکندگی رابطه بسازد.
پاسخ قابل دفاع می‌گوید مشاهده‌های مجموعهٔ ب فاصلهٔ بیشتری از چهل دارند و بیشترین زمان آن هفتاد است، در حالی که در الف بیشترین مقدار پنجاه است. برای این فعالیت لازم نیست فرمول واریانس را آموزش بدهیم، چون هدف مقایسهٔ الگوست. اگر دوره آمار پیشرفته نیست، آوردن نام چند شاخص محاسبه‌نشده نباید جای توضیح روشن را بگیرد. یک جملهٔ ساده همراه عدد، از اصطلاح بی‌ارتباط شاهد بهتری است.
با این دادهٔ کم نمی‌توان برنامهٔ قطعی همهٔ هفته‌ها را تعیین کرد. هنرجو می‌تواند محدودیت را هم بیان کند: معلوم نیست این جلسه‌ها مشابه بوده‌اند یا این سه مشاهده نمایندهٔ کار معمول‌اند. پذیرش این محدودیت بخشی از تحلیل مسئولانه است. از دستیار بخواهید پاسخ نمونه را به دو بخش «آنچه داده نشان می‌دهد» و «آنچه هنوز نمی‌دانیم» تقسیم کند تا مرز نتیجه‌گیری قابل دیدن شود.
سؤال پنجم ارزیابی با معیار آشکار
اکنون دو پیشنهاد فرضی داریم. پیشنهاد اول می‌گوید برای هر جلسه دقیقاً چهل دقیقه زمان آماده‌سازی بگذاریم، چون میانگین هر دو مجموعه چهل است. پیشنهاد دوم می‌گوید پیش از تعیین زمان ثابت، نوع درس و نوسان مشاهده‌ها را بررسی و برای درس‌های زمان‌بر ذخیره در نظر بگیریم. سؤال: «اگر معیار شما کاهش احتمال آماده‌نشدن درس باشد، کدام پیشنهاد قابل دفاع‌تر است و چه دادهٔ دیگری می‌خواهید؟»
پاسخ مناسب از معیار استفاده می‌کند. می‌توان توضیح داد پیشنهاد دوم در برابر تفاوت مشاهده‌ها حساس‌تر است، ولی مقدار ذخیره بدون اطلاعات بیشتر قابل تعیین نیست. لازم نیست همهٔ پاسخ‌ها یک متن واحد داشته باشند. اگر هنرجو پیشنهاد اول را با شرط مشخص و دادهٔ تکمیلی قابل دفاع اصلاح کند، صرف متفاوت‌بودن با کلید نباید آن را رد کند. ارزیابی یعنی داوری مستدل بر اساس معیار، نه حدس‌زدن ترجیح مدرس.
از دستیار برای یافتن ضعف استدلال کمک بگیرید: آیا پاسخ از داده شاهد آورده، معیار را به کار برده و محدودیت را پذیرفته است؟ دستور نمره‌دهی قطعی از روی یک بند کوتاه ندهید. ممکن است پاسخ با واژه‌های ساده، استدلال درستی داشته باشد یا برعکس، واژگان حرفه‌ای یک نتیجهٔ بی‌پشتوانه را پنهان کنند. بازبین انسانی باید به دلیل تصمیم برسد، نه به ظاهر لحن.
سؤال ششم خلق یک روش جمع‌آوری و تصمیم
در سطح خلق، خروجی یک طرح کوچک است: «برای دو هفتهٔ آینده، روشی پیشنهاد کنید که آموزشگاه فرضی زمان آماده‌سازی درس‌های متفاوت را ثبت کند و در پایان بتواند برای هفتهٔ بعد برنامه‌ریزی کند. ستون‌های برگه، زمان ثبت، مسئول بررسی و دو خطای محتمل را بنویسید.» این سؤال از هنرجو می‌خواهد اجزای مفهوم، شرایط اجرا و نیاز تصمیم را به یک روش منسجم تبدیل کند.
نمونهٔ پاسخ می‌تواند ستون‌هایی برای شناسهٔ درس، نوع فعالیت، زمان شروع و پایان آماده‌سازی، وقفهٔ خارج از کار و یادداشت تغییر محتوا داشته باشد. مسئول ثبت، خود مدرس و مسئول مرور، هماهنگ‌کنندهٔ آموزشی است. لازم نیست نام یا اطلاعات تماس هنرجو جمع شود، چون به هدف زمان‌سنجی آماده‌سازی ربطی ندارد. طرح باید روشن کند وقفه‌ها چگونه جدا می‌شوند تا عددهای نابرابر کنار هم قرار نگیرند.
دو خطای محتمل، ثبت از حافظه در پایان هفته و ترکیب درس تازه با مرور درس تکراری است. پاسخ خوب فقط این خطاها را نام نمی‌برد؛ برای هرکدام کنترل اجرایی می‌گذارد. ثبت کوتاه در پایان هر آماده‌سازی و جداکردن نوع درس، دو کنترل ممکن‌اند. هنرجو حق دارد روش دیگری پیشنهاد کند، اگر قابل اجرا باشد و رابطهٔ آن با تصمیم نهایی را توضیح دهد. محصول خلاق، الزاماً طرح بزرگ و پرهزینه نیست.
دستور کاری که از دستیار خروجی قابل بازبینی می‌خواهد
یک دستور مفید را می‌توان چنین نوشت: «با استفاده از تعریف و دادهٔ پیوست، برای شش فرایند شناختی، شش سؤال متفاوت پیشنهاد کن. برای هر سؤال بنویس هنرجو چه کاری انجام می‌دهد، چه شاهدی تحویل می‌دهد و چرا پاسخ با بازگویی تعریف کافی نیست. عدد تازه را صریحاً فرضی علامت بزن. اگر هدف و سطح پیشنهادی سازگار نیستند، آن را اعلام کن. پاسخ نهایی و بازخورد را جدا بنویس.»
بهتر است تولید را در دو نوبت انجام دهید. در نوبت نخست، فقط صورت سؤال و شاهد را بگیرید؛ پس از انتخاب مدرس، کلید و بازخورد ساخته شود. اگر همه‌چیز در یک درخواست بلند تولید شود، احتمال دارد طراح به خاطر پاسخ خوش‌ظاهر، سؤال نامناسب را حفظ کند. جداکردن مرحله‌ها فرصتی می‌دهد پیش از صرف وقت روی کلید، نیت واقعی سؤال اصلاح شود.
همچنین از ابزار نخواهید برای هر سطح درصد دشواری یا احتمال پاسخ درست بسازد. بدون اجرای واقعی و دادهٔ معتبر، چنین عددی صرفاً حدس است. می‌توان از او خواست دشواری‌های احتمالی خواندن، محاسبه یا آشنایی با زمینه را فهرست کند. مدرس سپس آن‌ها را با مخاطبان خود تطبیق می‌دهد. «ممکن است واحدها گیج‌کننده باشند» پیشنهاد بازبینی است؛ «این سؤال برای هفتاد درصد کلاس دشوار است» ادعای اثبات‌نشده است.
روبریک کوتاه برای کنترل کیفیت مجموعه
برای بازبینی، چهار معیار مستقل پیشنهاد می‌کنیم: ارتباط با هدف، نیاز واقعی به فرایند شناختی، کفایت داده و روشن‌بودن شاهد پاسخ. هر معیار می‌تواند با سه وضعیت «روشن»، «نیازمند اصلاح» و «غایب» ثبت شود. این یک ابزار پیشنهادی تحریریه است، نه مقیاس استاندارد روان‌سنجی. مجموع علامت‌های خوب نباید نقص حیاتی را بپوشاند؛ سؤال بدون دادهٔ کافی، با وجود نثر خوب آمادهٔ انتشار نیست.
روی سؤال پنجم همین کنترل را اجرا کنید. هدف تصمیم برنامه‌ریزی دارد، معیار کاهش احتمال آماده‌نشدن درس مشخص است و داده‌ها امکان مقایسهٔ محدود را می‌دهند. شاهد پاسخ باید انتخاب، دلیل و نیاز اطلاعاتی باشد. اگر در کلید فقط نام پیشنهاد دوم آمده، روبریک نشان می‌دهد بخش شاهد ناقص است. اگر صورت سؤال بخواهد میزان دقیق ذخیره تعیین شود، داده برای آن کفایت ندارد و باید درخواست محدود شود.
همکار مدرس را برای بازبینیِ مستقل دعوت کنید و ابتدا برچسب سطح را از او پنهان نگه دارید. بپرسید با حل سؤال چه کار فکری انجام داد. اختلاف نظر را در متن صورت سؤال و محصول مورد انتظار دنبال کنید. هدف رسیدن به توافق صوری روی یک عنوان نیست؛ اختلاف می‌تواند نشان دهد یک سؤال با دو مسیر متفاوت و شواهد نابرابر حل می‌شود. این اطلاعات برای اصلاح ارزشمند است.
اجرای آزمایشی و خواندن پاسخ واقعی
پیش از استفاده در آزمون مهم، مجموعه را در فعالیت کوتاه و کم‌فشار امتحان کنید. از چند داوطلب بخواهید هنگام حل توضیح دهند درخواست را چگونه فهمیده‌اند. اگر بیشتر زمان صرف فهم داستان یا یافتن واحدها می‌شود، بار زبان ممکن است هدف شناختی را پنهان کرده باشد. این مشاهده به معنی ناتوانی افراد نیست. ابتدا ابهام صورت سؤال و تناسب پیش‌نیاز را بررسی کنید.
در نمونهٔ تحلیلی، ممکن است هنرجو تنها بنویسد «ب نوسان بیشتری دارد». برای تصمیم دربارهٔ کیفیت پاسخ، باید بدانیم آیا او عددها را بررسی کرده یا عبارتی حفظ‌شده را تکرار کرده است. درخواست یک شاهد مشخص مثل مقایسهٔ بیشترین زمان، پاسخ را روشن‌تر می‌کند. در مقابل، تحمیل یک اصطلاح تخصصی که در هدف درس نیست، می‌تواند استدلال قابل قبول را بی‌دلیل ناکافی نشان دهد.
پس از اجرا، دو یا سه پاسخ بی‌نام و مجاز را با هم مقایسه کنید. ببینید سؤال‌ها واقعاً اطلاعات متفاوتی دربارهٔ یادگیری داده‌اند یا همه فقط توان نوشتن توضیح بلند را منعکس کرده‌اند. برای اصلاح مجموعه لازم نیست هر بار سطح را بالاتر ببرید. گاهی یک سؤال کاربردی کوتاه، فاصلهٔ دانستن قاعده و اجرای آن را بهتر از یک سناریوی طولانی آشکار می‌کند. اصلاح باید به هدف برگردد.
دشواری را از نوع فکر جدا کنیم
یک سؤال یادآوری دربارهٔ اصطلاحی ناآشنا می‌تواند برای کلاس بسیار دشوار باشد، در حالی که تحلیل دو نمودار ساده ممکن است برای همان افراد آسان‌تر باشد. بنابراین از شش نام طبقه‌بندی، نردبان قطعی سختی نسازید. آشنایی با موضوع، مقدار داده، بار خواندن و تجربهٔ قبلی روی دشواری اثر می‌گذارند. در مثال ما، محاسبهٔ میانگین چهار عدد اعشاری شاید بیشتر وقت بگیرد، اما افزودن اعشار به‌تنهایی فرایند شناختی را از کاربرد به تحلیل تبدیل نمی‌کند.
برای کنترل این تفاوت، ابتدا صورت کوتاه و دادهٔ ساده را اجرا کنید. اگر هدف دیدن رابطهٔ میانگین و نوسان است، به هنرجو اجازه دهید محاسبهٔ پایه را با روش مجاز انجام دهد تا اشتباه حساب، شاهد تحلیل را پنهان نکند. اگر خود محاسبه هدف است، همین کمک ممکن است مناسب نباشد. شرایط استفاده از ماشین‌حساب یا دستیار را برای هر فعالیت پیشاپیش روشن کنید. تغییر ناگهانی شرایط میان دو گروه، مقایسهٔ نتیجه را مبهم می‌کند.
یک جلسهٔ شصت‌دقیقه‌ای با همین مجموعه
برای کلاس نمونه، می‌توان ده دقیقه را به یادآوری و توضیح مفهوم اختصاص داد، پانزده دقیقه را برای محاسبه و تحلیل دو مجموعه گذاشت، پانزده دقیقه دربارهٔ دو پیشنهاد برنامه‌ریزی گفت‌وگو کرد و بیست دقیقهٔ آخر را به طرح جمع‌آوری داده و بازخورد داد. این زمان‌ها پیشنهاد اجرایی‌اند، نه نتیجهٔ پژوهش یا الزام آموزشی. مدرس باید زمان را با تعداد افراد، شیوهٔ پاسخ و نیاز دسترس‌پذیری تنظیم کند.
در بخش تحلیلی، ابتدا هر نفر شاهدش را کوتاه بنویسد؛ سپس دو نفر پاسخ‌ها را مقایسه کنند. به این ترتیب گفت‌وگوی گروهی، پاسخ فردی را کاملاً محو نمی‌کند. در بخش خلق، گروه می‌تواند یک فرم مشترک بسازد، اما هر عضو باید یک تصمیم طراحی را توضیح دهد. اگر فقط زیباترین فرم ارائه شود، معلوم نیست همهٔ اعضا رابطهٔ ستون‌های برگه و تصمیم نهایی را فهمیده‌اند. توضیح انتخاب، بخشی از محصول فعالیت است.
یک پاسخ مرزی را پیش از نمره‌گذاری بررسی کنیم
برای سؤال تحلیل، این پاسخِ فرضی را در نظر بگیرید: «هر دو گروه میانگین چهل دارند، پس برای هر جلسه چهل دقیقه کافی است». بخش نخست با داده‌ها سازگار است، اما نتیجهٔ دوم از آن به دست نمی‌آید. بازبین باید این دو بخش را جدا علامت بزند؛ حذف همهٔ امتیاز، دانستهٔ درست را پنهان می‌کند و پذیرش کامل، استدلال نادرست را تأیید می‌کند. در برگهٔ همراه بنویسید شاهدِ لازم، مقایسهٔ پراکندگی و بیشترین زمان است. پاسخ اصلاح‌شده باید به مقدارهای ده و هفتاد در گروه دوم اشاره کند و محدودیت سه مشاهده را نیز نگه دارد.
اکنون می‌توان فهمید مشکل از سطح سؤال است یا معیار تصحیح. اگر چند بازبین همین پاسخ را متفاوت می‌خوانند، ابتدا مشخص کنند امتیاز به محاسبه، تفسیر یا تصمیم تعلق دارد. لازم نیست برای رفع اختلاف، سؤال را فقط آسان‌تر کنند. ممکن است افزودنِ یک جمله دربارهٔ دلیل تصمیم به صورت سؤال، همان کار فکری مطلوب را آشکار کند. نسخهٔ پیشین و اصلاح‌شده را کنار هم نگه دارید تا روشن بماند کدام ابهام برطرف شده است.
دفتر اصلاح سؤال را از دفتر نمره جدا نگه داریم
برای هر سؤال یک یادداشت کوتاه نگه دارید: کدام عبارت مبهم بود، چه پاسخ غیرمنتظره‌ای دیده شد و تغییر بعدی چیست. این دفتر دربارهٔ کیفیت ابزار سنجش است و لازم نیست نام افراد را داشته باشد. برای نمونه بنویسید «در سؤال چهارم، دو پاسخ زمان کلاس را به‌جای آماده‌سازی مقایسه کردند؛ در نسخهٔ بعد نام متغیر کنار هر جدول تکرار شود.» این یادداشت به اصلاح صورت سؤال منتهی می‌شود، نه برچسب‌زدن به هنرجو.
اگر بعد از اجرا اشکال واقعی در سؤال پیدا شد، اثر آن بر بازخورد و نمره را بر اساس قواعد اعلام‌شدهٔ مجموعه بررسی کنید. صرف تعویض فایل برای نوبت بعد، ابهام تجربهٔ فعلی را حل نمی‌کند. به افراد توضیح دهید کدام بخش صورت سؤال اصلاح شده و آیا لازم است فعالیتی را دوباره انجام دهند. گزارش تغییر کوتاه و مشخص، هم به اعتماد کمک می‌کند و هم مانع می‌شود جواب نسخهٔ قبلی در گروه کلاس به عنوان تنها کلید معتبر باقی بماند.
نقش فاکسیمون در مسیر سنجش
وقتی مجموعه آماده شد، راهنمای سنجش یادگیری آنلاین کمک می‌کند جای هر سؤال را در مسیر درس تعیین کنید. پرسش آغازین برای تشخیص پیش‌نیاز با فعالیت پایان درس یک نقش ندارد. برای ساخت آزمون از یک منبع و کنترل پاسخ، راهنمای پیش‌نویس آزمون و بازبینی کلید مکمل این مقاله است؛ اینجا تمرکز بر تفاوت کار شناختی سؤال‌ها بود.
در استفاده از دستیار فاکسیمون، منبع همان درس، درخواست محدود و تصمیم مدرس را کنار هم نگه دارید. پیشنهاد سؤال یا بازخورد، نتیجهٔ قطعی ارزیابی هنرجو نیست. اگر پاسخ از موضوع خارج شد یا دادهٔ کافی نداشت، اصلاح صورت سؤال یا ارجاع انسانی لازم است. برای پرسش‌های داخل فیلم نیز راهنمای ویدیوی تعاملی کمک می‌کند سؤال در نقطهٔ مناسب قرار گیرد، نه فقط کنار دکمهٔ ادامه.
برای شروع، یک مفهوم و همین شش نوع خروجی را در امکانات ارزیابی فاکسیمون بررسی کنید. سپس تنها سؤال‌هایی را وارد تجربهٔ واقعی کنید که هدف، داده، پاسخ و بازخوردشان بازبینی شده است. ارزش AI در این کار، افزایش گزینه‌های قابل بررسی است؛ ارزش آموزشی را سازگاری سؤال با هدف و واکنش بعدی مدرس به شاهد واقعی یادگیری تعیین می‌کند.
برای اجرای همین مثال می‌توانید برگهٔ شش سؤال و فرم بازبینی مدرس را دریافت و با هدف درس خود تطبیق دهید.