equity on general english achievement tests through gender-based dif analysis across different majors

This study is an investigation of gender equity in the context of the general english achievement test developed and used at islamic azad university (isfahan branch, iran), henceforth iaugeat, with test takers majoring in different fields of study. a sample of 835 students sitting for iaugeat was chosen purposively. the test scores were analyzed by the one-parameter irt model. a focus group interview (10 test developers and language teachers) was also used to inquire into their perceptions about the impact of test takers’ gender and major on test equity. the findings of the dif analysis indicated a reciprocal action between item type and gender dif as some items exhibited dif across different subgroups. in three subgroups, they favored female students. in one subgroup, they favored males. in the other two subgroups, they favored males and females alike. the results were further confirmed by the qualitative data obtained from the focus group interview. in general, our findings strongly suggest that checking gender equity via a rasch-model dif analysis is both eminent and convergent with a qualitative evaluation of test-takers' performance by test developers and instructors.

برابری در آزمون های پیشرفت عمومی انگلیسی از طریق تجزیه و تحلیل dif مبتنی بر جنسیت در رشته های مختلف

این پژوهش، بررسی برابری جنسیتی در چارچوب آزمون پیشرفت زبان انگلیسی عمومی است که در دانشگاه آزاد اسلامی (واحد اصفهان، ایران)، از این پس iaugeat، با آزمون‌دهندگان رشته‌های تحصیلی مختلف تهیه و مورد استفاده قرار می‌گیرد. نمونه ای از 835 دانش آموز نشسته برای iaugeat به صورت هدفمند انتخاب شد. نمرات آزمون توسط مدل irt یک پارامتری مورد تجزیه و تحلیل قرار گرفت. یک مصاحبه گروهی متمرکز (10 برنامه‌نویس آزمون و معلمان زبان) نیز برای بررسی ادراکات آنها در مورد تاثیر جنسیت و رشته شرکت‌کنندگان در برابری آزمون استفاده شد. یافته‌های تجزیه و تحلیل dif نشان‌دهنده یک عمل متقابل بین نوع آیتم و جنسیت dif است زیرا برخی از آیتم‌ها dif را در زیر گروه‌های مختلف نشان می‌دهند. در سه زیر گروه، دانشجویان دختر را ترجیح دادند. در یک زیر گروه، آنها مردان را ترجیح می دادند. در دو زیرگروه دیگر، آنها مردان و زنان را به طور یکسان ترجیح می دادند. نتایج بیشتر با داده های کیفی به دست آمده از مصاحبه گروهی متمرکز تایید شد. به طور کلی، یافته‌های ما قویاً نشان می‌دهد که بررسی برابری جنسیتی از طریق تحلیل مدل rasch با ارزیابی کیفی عملکرد شرکت ‌کنندگان در آزمون توسط توسعه‌ دهندگان آزمون و مدرسان، برجسته و همگرا است.