study quality in quantitative l2 research: a path analysis on the perceptions of iranian published authors

Inspired by the works of scholars who have done great efforts to improve study quality in second language (l2) papers in the recent decade (e.g., hu & plonsky, 2019; larson-hall, 2012, 2017; plonsky, 2013; norris, 2015), this paper aims to capture the perceptions of iranian authors around issues of quality that have been emphasized by publication manuals (e.g., apa, 2010; wilkinson, 1999) and recommendation (e.g., norris et al., 2015). the triggering idea behind the study was that in order to adhere to standards of quality, authors, first, need to perceive the issues highly-associated with the concept. accordingly, a questionnaire of quality developed by larson-hall and jahanbakhsh (inreview) was used to capture respondents’ perceptions. out of the 1029 authors who had published quantitative papers in 10 iranian journals from 2015 to 2019, 885 authors could be contacted and 128 answered the questionnaire. the results showed that respondents saw fundamental issues like random sampling, reliability, validity, checking normality, and reporting inferential statistics as the most highly-associated features with quality while the concerned issues by scholars, like generalizability in convenience samplings, use of delayed posttest, reporting non-significant results, and importance of visual presentations are less acknowledged. moreover, using structural equation modeling (sem), it was revealed that a path of perception exists which starts from sampling issues and going through design and statistical to reporting practices. it was recommended that authors take the issues of study quality more seriously in both their works and the context of education.

کیفیت مطالعات در مقالات کمی زبان دوم: تحلیل مسیر بر روی دیدگاه نویسندگان ایرانی

پژوهش حاضر الهام گرفته از تحقیقات دهه اخیر بر روی کیفیت مطالعات در پژوهشهای مربوط به زبان دوم است که قصد دارد دیدگاه نویسندگان ایرانی ایرانی را در این زمینه به تصویر بکشد. ایده ی اصلی تحقیق براین منطق استوار است که محققان پیش از آنکه استانداردهای کیفیت مطالعه را در تحقیقات خود رعایت کنند باید این استانداردها را موجب افزایش کیفیت مطالعه بدانند. بر این اساس پرسشنامه ای که اخیرا توسط لارسنهال و جهانبخش (2020) طراحی و روایی سنجی شده است در پلت فرم گوگل بارگذاری شد لیست تمام نویسندگان (1029 نفر) تحقیقات کمی در 10 مجله ی معتبر ایرانی (بنابر رده بندی وزارت علوم، تحقیقات و فناوری) به دست امده و از این میان لینک پرسشنامه به 885 نفر آنها که دارای راه تماس الکترونیکی بودند ارسال شد. در نتیجه 128 نفر به پرسشنامه پاسخ دادند. نتایج نشان داد که نوسیندگان تحقیق مواردی همچون نمونه گیری تصادفی، بررسی روایی و پایایی، بررسی نرمالیته و گزارش امار استنباطی را موراد مهم در کیقیت تحقیق می دانستند. این در حالی بود که مشکلات تعمیم پذیری در نمونه گیری دردسترس، استفاده از آزمون متاخر، گزارش نتایج غیرمعنادار، و اهمیت استفاده از نمودارهای گرافیکی مواردی بودند که از نظر نوسیندگان دارای اهمیت کمی بودند. همچنین با استفاده از مدل سازی معادلات ساختاری مشخص شد که مسیر کیفیت مطالعه از دیدگاه نوسیندگان از بخش نمونه گیری اغاز شده و به سمت طرح تحقیق و از پس به سمت آزمونهای آماری می رود و در نهایت به قسمت گزارش نتایج می رسد. در نهایت توصیه میشود که پژوهشگران موارد مربوط به کیفیت تحقیق را هم در پژوهش های خود و هم در محیط های آموزشی با جدیت در نظر بگیرند.