پژوهش: آموزش «فکر» به عامل‌های هوش مصنوعی همیشه ضروری نیست

پژوهشگران در پیش‌چاپی در arXiv بررسی کرده‌اند که آموزش فکرهای مدل معلم تا چه اندازه برای عملکرد عامل‌های مبتنی بر مدل‌های زبانی بزرگ ضروری است. در روش رایج تقطیر عامل‌ها، مدل دانش‌آموز با مسیرهای کامل مدل معلم آموزش می‌بیند؛ مسیرهایی که معمولاً فکرها و کنش‌ها را درهم می‌آمیزند.

پژوهشگران با تغییر مستقل فکرها و کنش‌های مدل معلم، اثر هرکدام را جداگانه سنجیدند. در بنچمارک‌های رایج عامل‌ها و در مقیاس‌های مختلف مدل، تغییر دادن یا کنار گذاشتن فکرها اثر اندکی بر عملکرد دانش‌آموز داشت. بااین‌حال، نظارت بر فکر زمانی اهمیت پیدا کرد که اطلاعات آن در کنش متناظر در داده‌های آموزش آشکار نبود.

نویسندگان می‌گویند این یافته‌ها لزوم تقطیر همهٔ مسیرهای مدل معلم را زیر سؤال می‌برد و نشان می‌دهد آموزش فکر می‌تواند بسته به میزان بازتاب اطلاعات آن در کنش‌ها، انتخابی برای افزایش کارایی باشد. این مقاله در arXiv منتشر شده و پیش‌چاپ است.