الزامات همترازسازی نمرات در نسخه‌های جایگزین آزمون ‌های سرنوشت‌ساز: مورد مطالعه آزمون سراسری داوطلبان زبان ‌های خارجی

برگزاری دو نوبت آزمون سراسری در یک سال مستلزم ساخت نسخه‌های جایگزین و همترازسازی نمرات آن‌ها است. همترازسازی نسخه‌های جایگزین نیازمند برقراری الزامات خاصی است. در آزمون‌های سرنوشت‌ساز به علت مسائل امنیتی امکان اجرای آزمایشی سوال‌ها وجود ندارد. این مطالعه باهدف بررسی برقراری الزامات همترازسازی نسخه‌های جایگزین نوبت‌های اول و دوم آزمون سراسری گروه زبان خارجی انگلیسی سال 1402 انجام شد. پژوهش حاضر به لحاظ هدف کاربردی و از نوع روان‌سنجی که بر اساس تحلیل ثانویه داده‌ها انجام شده است. بدین منظور از بین کلیه داوطلبان گروه آزمایشی زبان انگلیسی سال 1402، از نوبت اول 13091 و از نوبت دوم 19915 داوطلب به‌صورت تصادفی انتخاب و داده‌های مربوط به آزمون‌های اختصاصی گروه آزمایشی زبان‌های خارجی (انگلیسی) اجراشده در دی‌ماه 1401 و تیرماه 1402 تحلیل شده است. میانگین ضرایب دشواری و تشخیص دو نوبت آزمون نزدیک به هم گزارش شده است. برقراری الزام سازة یکسان دو نوبت آزمون، با نتایج تحلیل عاملی تک‌بعدی، مقایسه عملکرد زنان و مردان و رابطه نمره آزمون با معدل دبیرستان مورد تائید قرار گرفت. همچنین الزام پایایی یکسان نیز بررسی و میزان آن در هر دو نوبت آزمون 95/0 بود. همترازی نسخه‌های جایگزین مستلزم رعایت الزاماتی است که برآورد قضاوتی دشواری سوال‌ها و استفاده از جدول مشخصات آزمون می تواند به طراحان در ساخت نسخه‌های جایگزین کمک کند. به منظور برقراری الزامات و همچنین طراحی سوال‌هایی با دشواری مشابه رهنمودهایی ارائه شده است.

the equating requirements of scores in alternative forms of high-stakes tests: the case study of the national entrance exam of the foreign language applicants

when administering two nationwide tests in a single year, it becomes necessary to create alternate forms of the exams and equate their scores. this equating process involves specific requirements. in the context of high-stakes tests, due to security concerns, pilot testing of items is often not feasible, further highlighting the need for careful equating procedures. the primary objectives of this study were to delve into the requirements for equating the alternate forms of the first and second 2023 english language foreign nationwide examinations. the research in question is of an applied and psychometric nature, relying on secondary data analysis as its methodological foundation. a total of 13,091 candidates from the first test and 19,915 candidates from the second test of the english language 2023 nationwide examination were chosen randomly for analysis. the data from the tests administered in january 2023 and july 2023 were scrutinized as part of this study. both tests exhibited similar levels of difficulty and discrimination, as indicated by their comparable mean difficulty coefficients and discrimination coefficients. the construct equivalence of the two tests was confirmed through single-factor confirmatory factor analysis, as well as by comparing the performance of male and female candidates and examining the correlation with high school gpa. additionally, the study examined the equal consistency requirement, finding a value of 0.95 in both test forms. to equate alternate forms, it's crucial to meet certain requirements, and test developers may employ judgmental estimation of item difficulty, as well as utilize the test specification table, to create alternate forms meeting those requirements. guidelines have been outlined to fulfill the prerequisites for equating alternate forms and crafting items with comparable difficulty levels.