an investigation into item types and text types of reading comprehension section of iranian ph.d. entrance exams using g-theory

This study investigates some problems of ph.d. applicants in their entrance exams in the case of answering the reading comprehension questions. to this end, the researchers considered the item types and text types as main effects and their interaction effect using generalizability theory for examining the variability; the answer sheets of a mocktest from 321 applicants, from all parts of iran, enrolled in an institute were randomly selected. using a partially nested design of g-theory in the genova program, the researchers identified five variance components in the two different passages with distinct items and investigated various sources of error that are involved in the measurement process. the results of the study showed that the main effect for items cannot be separated from the interaction between items and texts, and clarified that the items facet had a noticeable amount of variance, and therefore, they impacted the applicants’ performance. however, the results of dstudies showed that the main effect for text types was zero, and both texts were at the same level of difficulty. also, the persons had effects on the texts in their interaction. this study can motivate the researchers, test developers, and test designers to consider their work more carefully.

بررسی نوع سوالات و نوع متن درک مطلب ازمون ورودی دکتری ایران با استفاده از نظریه جی

این تحقیق به بررسی برخی از مشکلات داوطلبان دکتری در امتحان ورودی شان در پاسخ به سوالات درک مطلب زبان عمومی می پردازد. بدین منظور, محققین "نوع سوالات" و "نوع متن" را بعنوان "اثرات اصلی" و "اثر مبادله/ ترکیب شان" را با استفاده از نظریه تعمیم پذیری برای بررسی تغییرپذیری درنظر گرفتند. پاسخنامه 321 داوطلب در یک شبه ازمون استانداری از سراسر ایران که در یک موسسه معروفی شرکت نمودند بطور تصادفی انتخاب شد. با استفاده از طرح پارشل نست از این نظریه در برنامه جنوا, محققین 5 مولفه تغییرپذیری را در دو متن متفاوت با سوالات متمایز تعیین نمودند و منابع مختلف اشتباهات که در این پروسه سنجش وجود دارد را مشخص نمودند. نتایج حاصله نشان داد که تاثیر اصلی نوع سوالات را نمی توان از تبادل و ترکیب نوع سوال و متن جدا نمود و همچنین مشخص شد که نوع سوالات باعث میزان قابل توجه ایی از پراکندگی می شود و بنابراین انها بر عملکرد داوطلبین تاثیر دارند. باوجود این نتایج حاصل از "مطالعه دی" نشان دادکه تاثیر اصلی نوع متن صفر بوده و هردو متن در یک سطح دشواری بودند. همچنین خود داوطلبین بر متن ها در تبادلشان تاثیرگذاربودند. این تحقیق می تواند محققین, طراحان سوال و تهیه کنندگان انرا برای بررسی دقیق تر رهنمون و تشویق نماید.