مقایسه کیفیت بازخورد استدلالی مبتنی بر مدل های هوش مصنوعی زبان بزرگ

هدف اصلی این پژوهش ارزیابی و مقایسه کیفیت بازخورد مبتنی بر هوش‌های مصنوعی چت جی‌پی‌تی، جمینای و دیپ سیک بود. رویکرد این پژوهش کمی بوده و از نظر هدف در زمره پژوهش‌های کاربردی قرار دارد. جامعه این پژوهش کلیه مقالات استدلالی نوشته شده توسط دانشجویان رشته علوم‌تربیتی در درس روش‌های پژوهش‌کمی و‌کیفی بود. از این میان 17 مقاله کوتاه به عنوان نمونه پژوهش انتخاب شدند. به منظور اجرای این پژوهش ابتدا یک مدل بازخورد استدلالی طراحی و تولید شد، و سپس این مدل در محیط چت‌بات‌های مربوط به هوش‌های مختلف جایگذاری و بازخورد استدلالی مربوطه دریافت شد. داده‌های حاصل از بازخورد استدلالی هوش‌های مصنوعی با استفاده از یک طرح کدگذاری ساخته شده براساس مدل استدلال‌ورزی تحلیل شد. برای تجزیه و تحلیل داده‌های گردآوری شده از روش‌های آماری توصیفی (شاخص‌های مرکزی و پراکندگی) و استنباطی (آزمون تحلیل واریانس یک‌طرفه) استفاده شد. نتایج نشان داد که هوش مصنوعی چت جی‌پی‌تی، عملکرد بهتری نسبت به دو هوش دیگر داشته و بعد از آن دیپ سیک نمره بالاتری را کسب نموده است. به عبارتی دیگر، بازخوردهای ارائه شده توسط هوش مصنوعی چت جی‌پی‌تی از نظر کیفیت بهتر از دو هوش دیگر بود. این پژوهش تلویحات مهمی برای ارزیابی به کمک ابزارهای هوش مصنوعی در آموزش دارد.