پژوهشگران دانشگاه ایلینوی در اربانا شمپین نشان دادهاند که مدل زبانی GPT-4 (نسخه پیشرفته ChatGPT) توانسته با حداقل دخالت انسانی، از پس یک درس کامل مهندسی در مقطع کارشناسی برآید.
این مطالعه که با هدف بررسی توانمندی واقعی این مدل در محیطی مشابه با فضای آموزشی دانشگاهی انجام شده، شامل بیش از ۱۱۵ فعالیت درسی نظیر تمرینها، امتحانات و پروژههای برنامهنویسی بود.
ChatGPT توانست نمره نهایی ۸۲.۲۴ درصد (معادل نمره B) کسب کند، در حالی که میانگین کلاس ۸۴.۹۹ درصد گزارش شد. این مدل عملکرد بسیار خوبی در تمرینهای ساختاریافته و آزمونها داشت و حتی در بخش سؤالات چندگزینهای، از میانگین کلاس نیز پیشی گرفت. اما در پروژههای برنامهنویسی دچار ضعفهایی مانند کدنویسی غیربهینه و مشکل در ادغام سیستمها شد.
در این پژوهش از سه شیوهی دستوردهی به مدل استفاده شد: بارگذاری تصاویر، وارد کردن معادلات سادهشده بهصورت متنی، و استفاده از یادداشتهای کلاسی بهعنوان زمینه. مشخص شد روش سوم (زمینهمحور) بهترین نتایج را در تمامی انواع سؤالات به همراه داشت.
مقالهی کامل این پژوهش با عنوان «رویای دانشجوی تنبل: ChatGPT چگونه از یک درس مهندسی گذر کرد» در تاریخ ۱۱ مارس ۲۰۲۵ در arXiv منتشر شده و قرار است در چهاردهمین سمپوزیوم بینالمللی آموزش مهندسی کنترل نیز ارائه شود.
اطلاعات بیشتر و منابع پژوهش از جمله سرفصل درس، آزمونها و پروژهها در وبسایت gradegpt.github.io در دسترس است.
کد خبر ۲۱۲۰۴۰۲۲۱.۵۴۴
منبع: استادی فایندز
1 دیدگاه در “عبور موفق ChatGPT از یک درس مهندسی بدون کمک انسانی”
Good shout.