دو بسته وقتی قابل مقایسهاند که مهارت هدف، تعداد مراحل، حجم خواندن، نوع داده، زمان تقریبی و معیار تصحیح آنها نزدیک باشد؛ یکسانبودن متن یا عدد لازم نیست.
گام ۱: جدول مشخصات بساز
برای هر ردیف پنج ستون بنویس: مهارت، قالب سؤال، تعداد مراحل، نمره و دشواری. بستهٔ دوم باید برای هر ردیف یک سؤال متناظر داشته باشد.
گام ۲: مهارت را از موضوع جدا کن
موضوع دو سؤال میتواند فرق کند، اما عملیات ذهنی باید یکی باشد. «درصد کاهش زمان» و «درصد کاهش خطا» هر دو مهارت انتخاب مبنای درصد را میسنجند.
گام ۳: دشواری را با موانع بشمار
تعداد تبدیلها، دادههای اضافی، طول متن، نیاز به استنباط و تعداد مراحل محاسبه را ثبت کن. فقط آشنا یا ناآشنا بودن موضوع معیار دشواری نیست.
گام ۴: طول پاسخ را همسان کن
اگر سؤال نخست یک نتیجه و یک دلیل میخواهد، سؤال متناظر نیز همان دو جزء را بخواهد. مقایسهٔ پاسخ یککلمهای با پاسخ چندمرحلهای منصفانه نیست.
گام ۵: زمان را پیشآزمون کن
خودت هر دو بسته را با یک شیوه اجرا یا زمان هر تیپ را از تمرینهای قبلی برآورد کن. یک سؤال غیرعادیِ بسیار طولانی را جایگزین کن.
نمونهٔ جفت درک متن
بستهٔ اول: یافتن ادعا و یک شاهد در متن ۷۰واژهای. بستهٔ دوم: یافتن ادعا و یک شاهد در متن تازه با طول و ساختار نزدیک. موضوع میتواند متفاوت باشد.
نمونهٔ جفت محاسبات
بستهٔ اول: درصد کاهش از ۴۰ به ۳۴. بستهٔ دوم: درصد کاهش از ۲۵ به ۲۰. هر دو یک تفریق، انتخاب مبنا و تبدیل به درصد دارند.
نمونهٔ جفت نمودار
هر دو سؤال چهار نقطه، یک بازهٔ ثابت یا برگشت موقت و یک درخواست توصیف روند داشته باشند؛ اعداد و زمینه عوض شوند.
نمونهٔ جفت پاسخ تشریحی
هر دو سؤال با فعل «توضیح دهید» و معیار «نتیجه + دلیل» ساخته شوند. یکی تعریف و دیگری مقایسه نباشد.
کنترل آلودگی تمرین
پاسخ بستهٔ دوم نباید صرفاً با بهیادآوردن جمله یا عدد بستهٔ اول تولید شود. داده، ترتیب گزینهها و زمینه را تغییر بده، اما مهارت را ثابت نگه دار.
فهرست کنترل نهایی
آیا تعداد سؤال، نمره، مهارتها، مراحل، حجم متن، زمان، ابزار و روبریک تصحیح برابرند؟ اگر یکی فرق دارد، هنگام تفسیر نتیجه آن را ثبت کن.
اجرای قبل و بعد
بستهٔ نخست را با آزمون تشخیصی و بستهٔ دوم را با آزمون خروج همزمان کن. شرایط اجرا را نیز ثابت نگه دار.