شناسایی کارکرد افتراقی در آزمون پرلز 2016 با استفاده از درخت راش

هدف: دغدغۀ رو به افزایشی که در ناعادلانه بودن آزمون‌ها شکل گرفته، امکان وجود کارکرد افتراقی است. چرا که کارکرد افتراقی یا سوگیری باعث تردید در روایی آزمون می‌شود. در مطالعۀ حاضر شناسایی کارکرد افتراقی سوال‌های سواد خواندن پرلز 2016 بین دانش‌آموزان ایرانی از طریق مدل درخت راش بررسی شده است.  روش پژوهش: داده‌های استفاده شده در این پژوهش، نتایج مطالعه بین‌المللی پرلز 2016 در ایران است که با نمونه‌گیری دو مرحله‌ای تصادفی، تعداد 4385 نفر دانش‌آموز ایرانی شامل 2143 دانش‌آموز دختر (48.87 درصد) و 2242 دانش‌آموز پسر (51.13 درصد) پایه چهارم با میانگین سنی 10.14 برای شرکت در مطالعه انتخاب شدند و در آزمون شرکت کردند. داده‏های این مطالعه در محیط  r (تحت کتابخانه psychotree) تحلیل و بررسی شد. یافته‌ها: یافته‌ها نشان می‌دهند  که از 181 سوال در این مطالعه بر اساس جنسیت،  بر اساس مدل درخت راش 1 سوال در میان سوالات دو ارزشی با کارکرد افتراقی یکنواخت شناسایی شد. به علاوه در بین سوالات چندارزشی، برای بلوک 16 کارکرد افتراقی شناسایی شد.نتیجه‌گیری: به نظر می‌رسد با وجود کارکرد افتراقی تاثیر آن قابل صرف‌نظر است. اگرچه بهتر است که سوال‌های با کارکرد افتراقی هنگام انجام تحلیل‌ها کنار گذاشته شود. عملکرد ضعیف دانش‌آموزان ایرانی می‌تواند متاثر از این باشد که ترجمه متون مناسب نبوده یا دانش‌آموزان هنوز به توانایی لازم برای این سطح از خواندن دست نیافته‌اند. استفاده از نتایج آزمون پرلز نیازمند ظرافت و ملاحظات خاص است.

identifying differential item functioning in pirls 2016: a rasch-tree based approach

objective: a growing concern in unfairness of educational assessments is the possible presence of differential item functioning. differential item functioning or bias will undermine the validity of the assessment. in this study, identification of differential item functioning in pirls 2016 test among iranian students has been considered via the rasch-tree model.methods: the data used in this research are from pirls 2016 exam results that was also held in iran. a total of 4385 fourth grade iranian students were involved consisting of 2143 girls and 2242 boys with the average age of 10.14. the analysis performed by the authors on this dataset was written in r programming language.results: the results indicate that out of 181 questions, based on raschtree model, one dichotomous question shows uniform differential item functioning. moreover, among polytomous questions, block 16 shows differential item functioning. conclusion: it appears even though there is differential item functioning in the pirls 2016 test for iranian students, the impact is negligible. ideally, however, we would want to remove the questions with differential item functioning before conducting any analysis. using test results requires care and discretion.