هوش مصنوعی

سنجش فایدهٔ حافظهٔ عامل‌های هوش مصنوعی بر اساس وظیفه

پژوهشی در arXiv می‌سنجد یک خاطرهٔ ذخیره‌شده برای پاسخ‌گویی به هر وظیفه چقدر مفید است، نه اینکه به آن یک امتیاز اهمیت ثابت بدهد.

۱ دقیقه مطالعه
Figure 5. What single cells can and cannot show (exploratory). (a) Per-cell labels (helped, unchanged, hurt) in the original run against a new session at the same memory position ( 156 156 replicate cells; diagonal agree
تصویر درج‌شده در مقالهٔ اصلی؛ حقوق بازنشر مستقل تأیید نشده است. — arXiv · AI (پیش‌چاپ) · پرونده اصلی · منبع تصویر: ناشر خبر

در این روش، سامانه‌ای که خاطره را ذخیره می‌کند از وظیفهٔ آینده خبر ندارد. سپس یک مدل ثابت، همان وظیفه را یک‌بار با دسترسی به خاطره و یک‌بار بدون آن پاسخ می‌دهد؛ در هر دو حالت، متن‌های جایگزین یکسان‌اند. پژوهشگران همچنین منابع مصرف‌شده برای شکل‌گیری، ذخیره‌سازی و در دسترس قرار دادن خاطره را ثبت می‌کنند.

در آزمون‌های تک‌مرحله‌ایِ بازیابی واقعیت، مبتنی بر خاطرات عامل‌های وب در مجموعه‌دادهٔ LongMemEval-V2، خاطره‌هایی که اطلاعات لازم برای پاسخ را داشتند بیشتر کمک کردند. میانگین افزایش پاداشِ جفت‌شده برای این موارد، در مقایسه با گروه‌های کنترلِ همسان، ۰٫۳۳ بود؛ بازهٔ اطمینان ۹۵درصدی از ۰٫۲۱ تا ۰٫۴۶ گزارش شد. چکیدهٔ در دسترس جزئیات بیشتری از نتایج را بیان نمی‌کند.

این گزارش به کمک هوش مصنوعی تهیه شده است. مطالب براساس منابع درج‌شده تنظیم شده‌اند؛ صحت مستقل همه ادعاها تضمین نمی‌شود.

منبع: arXiv · AI (پیش‌چاپ) — مشاهده منبع اصلی ↗

پیش‌چاپ پژوهشی در arXiv؛ انتشار در این مخزن به معنی داوری همتا نیست