تحلیل کیفیت آزمون عینی ساختارمند بالینی در دانشگاه علوم پزشکی البرز

مقدمه: یکی از روشهای ارزشیابی مبتنی بر عملکرد، آزمون های عینی ساختارمند می باشد. گذراندن این آزمون جهت فراغت از تحصیل دانشجویان پزشکی، انجام طبابت و شرکت در دوره تخصصی ضروری است. این مطالعه  به منظور  تحلیل کیفیت این آزمون ها با استفاده از شاخص های سایکومتریک طراحی شده است.روش‌ها ‌: در این مطالعه توصیفی مقطعی آزمون های سه دوره صلاحیت بالینی 31 و 32 و 33 مورد تحلیل قرار گرفتند. شاخص های میانگین (انحراف معیار)، نمره حدنصاب (به روش رگرسیون مرزی)، میزان ردی، ضریب تعیینr^2 ، ریشه میانگین مربعات خطا برای تخمین میزان خطای حد نصاب همچنین ضریب دشواری و ضریب تمیز در تک تک ایستگاه ها و کل آزمون ها محاسبه شد.نتایج: 64 دانشجوی پزشکی سال آخر پزشکی  به همراه 26 نفر آزمونگر متخصص هر ایستگاه در این آزمون ها حضور داشتند. با توجه به نمره حد نصاب رگرسیون مرزی در آزمون 31 ام همه دانشجویان نمره قبولی را کسب کرده و مردود نداشتیم. rmse کل معادل 0.55 بود و مقدار  r^2در ایستگاه های مختلف از 0.45تا 0.85 بدست آمد. سخت ترین و آسانترین ایستگاهها براساس ضریب دشواری به ترتیب زنان، پزشکی اجتماعی و ارتوپدی بود. در آزمون 32ام میزان ردی یک نفر(4.3درصد) بود. rmse کل 0.57 و مقدار r^2 در ایستگاه های مختلف از 0.38تا 0.87 بدست آمد. سخت ترین و آسانترین ایستگاهها بر اساس ضریب دشواری به ترتیب ایستگاه رادیولوژی، طب اورژانس و جراحی  بود. در آزمون 33ام همه دانشجویان نمره قبولی را کسب کردند. rmse  کل معادل 0.77 بود و مقدارr^2  در ایستگاه های مختلف از 0.39 تا 95/ 0 بدست آمد. سخت ترین و آسانترین ایستگاهها بر اساس ضریب دشواری به ترتیب داخلی، غدد و جراحی بود.نتیجه‌گیری: برای ارتقای کیفیت آزمونosce  سنجش کیفیت آن حیاتی است. استفاده از شاخص های سایکومتریک می تواند گامی مهم در تعیین کیفیت آزمون باشد. نتایج به دست آمده در طول سه دوره آزمون حاکی از آن است که در بیشتر ایستگاه ها کیفیت آزمون قابل قبول بوده و در چند مورد نیز نیازمند بازنگری و بهبود وضعیت هستند.

analyzing the quality of objective structured clinical examination in alborz university of medical sciences

introduction: one of the evaluation methods is based on the performance of objective structured clinical examination. passing this exam is necessary for medical students to graduate, practice medicine and participate in a specialized course. this study is designed to analyze the quality of these tests using psychometric indicators.methods: in this cross-sectional descriptive study, the test of three periods of clinical competence, respectively, were analyzed. average (standard deviation), the cut-off score was (by borderline regression method), rejection rate, r2 determination coefficient, root mean square error to estimate the the cut-off score, difficulty coefficient, neatness coefficient were calculated in individual stations and the whole test.findings: 64 medical students along with 26 expert examiners from each station were present in this exam. according to the cut-off score in the 31st exam, all students got a passing grade and we did not fail. the total rmse was equal to 0.55 and the value of r2 in different stations was obtained from 0.46 to 0.85. the hardest and easiest stations based on the difficulty coefficient were gynecology, social medicine and orthopedics respectively. in the 32nd exam, the rejection rate was one person (0.23%). the total rmse was 0.57 and the value of r2 in different stations was obtained from 0.38 to 0.87. the most difficult and the easiest stations based on the difficulty coefficient were radilogy, emergency medicine and surgery respectively. in the 33rd exam, all students got a passing grade. total rmse was equal to 0.76 and r2 value was obtained in different stations from 0.39 to 0.95. the most difficult and easiest stations based on the difficulty coefficient were internal glands and surgery respectively.conclusion: to improve the quality of the osce exam, measuring its quality is vital. the use of several psychometric indicators can be an important step in determining the quality of the test. the results obtained during the three test periods indicate that the quality of the test is acceptable in most of the stations and some cases need to be reviewed and improved.