طراحی و تعیین روایی و پایایی ابزار ارزیابی عملکرد بالینی آزمونگر بیلی-3

هدف در چند سال اخیر برنامه ارزیابی و ارتقای تکامل کودکان، موردتوجه و تاکید نظام سلامت واقع شده است. در این راستا آموزش آزمونگران تست بیلی (bayley) و ارزیابی ایشان، به یکی از نیازهای نظام سلامت تبدیل شده است. این پژوهش با هدف طراحی یک ابزار جامع و معتبر و تعیین روایی و پایایی آن برای ارزیابی عملکرد بالینی آزمونگر بیلی انجام شد.روش بررسی جامعه پژوهش آزمونگران تست بیلی در دانشگاه‌های علوم‌پزشکی کشور بودند. در این مطالعه نمونه‌گیری مبتنی بر هدف انجام شد. ابتدا مفاهیم ارزیابی بالینی از طریق مرور متون و جلسات بحث گروهی متمرکز با 10 نفر از خبرگان تبیین شد و گویه‌های ابزار طراحی شد. جهت بررسی روایی ظاهری از نمره تاثیر استفاده شد. پرسش‌نامه به گروه خبرگان متشکل از 8 نفر از مربیان (ارزیابان) و آزمونگران باتجربه (ارزیابی‌شدگان) ارسال شد و از آن‌ها خواسته شد تا به گویه‌ها از نظر اهمیت از 1 تا 5 نمره دهند.گویه‌هایی که نمره تاثیر کمتر از 1/5 داشتند حذف شدند و ساختار سایر گویه مورد اصلاح و بازبینی ظاهری قرار گرفت. برای بررسی روایی محتوا از دو ضریب نسبی روایی محتوا و شاخص روایی محتوا استفاده شد و پرسش‌نامه به یک گروه 10نفری از خبرگان ارسال شد. با توجه به تعداد گروه خبرگان، گویه‌هایی که میزان ضریب نسبی روایی محتوای کمتر از 0/6 و شاخص روایی محتوای کمتر از 0/7 داشتند حذف شدند. پایایی ابزار از طریق تکرار‌پذیری دفعات آزمون (آزمون بازآزمون)، ضریب توافق در مشاهدات ارزیابان، مقایسه ارزیابان با ارزیاب مرجع و هم‌خوانی درونی تعیین شد. آنالیز داده‌های کمی با نرم‌افزار spss نسخه 22 انجام گرفت.یافته‌ها ابزار در بخش اختصاصی با 66 گویه شامل 32 گویه شناختی، 22 گویه زبانی (13 گویه درکی، 9 گویه بیانی)، 12 گویه حرکتی (9 گویه حرکات ظریف، 3 گویه حرکات درشت ) و در بخش عمومی با 14 گویه وارد مرحله سنجش ثبات زمانی و پایایی شد. میزان پایایی آزمون بازآزمون با ضریب همبستگی درون‌رده‌ای در بخش اختصاصی 0/83 و در بخش عمومی 0/86 و ضریب همبستگی درون‌رده‌ای در مشاهدات ارزیابان 0/80 (فاصله اطمینان 95 درصد: 58-82) بود. بیشترین ضریب همبستگی مربوط به مقیاس شناختی (0/88) و کمترین در حرکات درشت (0/76) بود. ضریب کاپا در بین مشاهده‌گران در بخش عمومی بالای 0/7 بود. بالاترین ضریب کاپا در بین مشاهده‌گران در حیطه اختصاصی برابر 1 و کمترین 0/35 بود. میزان هم‌خوانی درونی گویه‌ها (آلفای کرونباخ) در بخش عمومی 0/76 بود.نتیجه‌گیری ابزار طراحی‌شده در ارزیابی مهارت‌های بالینی آزمونگر بیلی دارای روایی و پایایی است.

designing and assessing the validity and reliability of the bayley-iii test examiner clinical performance scale

objective in recent years, the infant development and assessment programs have received attention by the health system of iran. in this regard, the training of examiners for performing the bayley tests has become one of the needs of the health system. this study aims to design and evaluate the validity and reliability of the bayley-iii examiner clinical performance scale.materials & methods in this study, participants were bayley-iii test examiners from medical universities in iran, who were selected using a purposive sampling method. first, in focused group discussion sessions with 10 bayley-iii test experts, the items of instrument were formulated. then, to evaluate the face validity, the questionnaire was sent to a panel of expert consisting of 8 bayley-iii experts and examiners and they were asked to rate the items from 1 to 5 in terms of importance. the items with an impact score of less than 1.5 were deleted, and other items were revised, if needed. to evaluate content validity, the questionnaire was sent to 10 bayley-iii test experts, and then the content validity ratio (cvr) and content validity index (cvi) were measured. the items with cvr <0.6 and cvi <0.7 were deleted. the reliability of the instrument was assessed by calculating the inter-rater reliability, test re-test reliability, and internal consistency. quantitative data analysis was done in spss software, version 22.results the instrument with 66 items, including 32 items for the cognitive domain, 22 items for the language domain (13 for receptive and 9 for expressive components), 12 items for the motor domain (9 for fine and 3 for gross motor skills), and 14 items for the general section, was assessed in stability and reliability. the intraclass correlation coefficient (icc) for the test re-test reliability was obtained 0.83 for the specific section and 0.86 for the general section. the icc for the inter-rater reliability was 0.80 (95% ci: 58-82). the highest correlation value was related to the cognitive scale (0.88), and the lowest value was for the gross motor skill subscale (0.76). the kappa coefficient for the inter-rater reliability of the general section was above 0.7. the kappa coefficient for the specific section ranged from 1 to 0.35. the cronbach’s α for the internal consistency of the general section was 0.76. conclusion the designed questionnaire is a valid and reliable tool to evaluate the clinical performance of bayley-iii test examiners in iran.