how predictable ratings are: the role of personality traits

Previous research has shown that raters’ personality characteristics exert an influence on their ratings, skewing the results and invalidating the decisions made about students’ future life. although the exact mechanism of these factors, their precise effect on ratings, and the interaction between the traits and ratings are yet to be empirically demonstrated, anecdotal evidence coupled with research findings suggests raters’ ratings do not necessarily reflect students’ abilities and may be affected by other construct-irrelevant variances, including personality traits. the purpose of the present study, therefore, was to examine the extent to which some selected personality traits would predict the ratings awarded by the raters to students’ written performance. to that end, teacher raters rated students’ essays on 13 assessment criteria using a 5-point analytic rating scale. big five inventory and student essays were used to measure teacher raters’ personality traits and to collect data. data were computed and analysed using spss (version 25). results from linear regression showed that extroversion, agreeableness, openness, neuroticism, and conscientiousness did not significantly contribute to the ratings. the findings suggest that such personality factors may not account for the ratings, and rater variability should be explained in terms of other personality variables. the implications of the study are discussed.

تا چه اندازه نمرات مصحان قابل پیش بینی هستند: نقش تیپ های شخصیتی

نتایج تحقیقات حاکی از این است که خصوصیات شخصیتی مصححان می تواند به صورت منفی و یا مثبت نمراتی که آنها به توانایی های زبان آموزان می دهند تحت تآثیر قرار بدهد. اگر چه هنوز مکانیزم دقیق خصوصیات شخصیتی، نمرات مصححان، و تعامل بین خصوصیات و نمرات مشخص نیست، مطالعات قبلی دلالت براین واقعیت دارد که نمرات مصححان نمی تواند منعکس کننده دقیق توانایی های زبان آموزان باشد و در نتیجه ممکن است نتایج را برعکس بکند و تصمیماتی که در مورد زبان آموزان براین اساس گرفته بشود نامعتبر کند. بنابراین هدف از تحقیق حاضر این بود که به صورت تجربی دریابد تا چه اندازه تیپ های شخصیتی می توانند نمراتیی را که مصححان به عملکرد نوشتاری زبان آموزان می دهند پیش بینی کند. به همین منظور، مصححان انشاهای زبان آموزان را با استفاده از سیزده معیار ارزیابی و با به کار گیری مقیاس رتبه ای نمره دادند. پرسشنامه تیپ شخصیتی و انشا های زبان آموزان برای سنجش تیپ شخصیتی مصححان و گرداوری داده ها استفاده شد. نتایج رگرسیون خطی نشان داد که تیپ های شخصیتی نمی توانند نمرات مصححان را پیش بینی کنند. نتایج بدست آمده حاکی از این است تیپ های شخصیتی نمی توانند نمرات را تبیین کنند و در نتیجه باید عوامل شخصیتی دیگر را برای تبیین نمرات مصححان جستجو کرد. کاربرد های نتایج مورد بحث و بررسی قرار می گیرد.