هوش مصنوعی

MLLMEraser حذف دانش را در مدل‌های چندوجهی هنگام اجرا هدف می‌گیرد

پژوهشگران چارچوبی بدون آموزش دوباره پیشنهاد کرده‌اند که با هدایت فعال‌سازی‌ها، دانش مشخصی را در زمان پاسخ‌گویی مدل کنار می‌گذارد؛ جزئیات روش در چکیدهٔ در دسترس کامل نیست.

۱ دقیقه مطالعه
Figure 1 : (a) Comparison between training-based and test-time unlearning paradigms for MLLMs. (b) Illustration of the activation steering process. (c)–(d) Differences between existing methods and ours in constructing an
تصویر درج‌شده در مقالهٔ اصلی؛ حقوق بازنشر مستقل تأیید نشده است. — arXiv · AI (پیش‌چاپ) · پرونده اصلی · منبع تصویر: ناشر خبر

پیش‌چاپی در arXiv چارچوبی به نام MLLMEraser را معرفی می‌کند که برای «فراموشی» در مدل‌های زبانی بزرگ چندوجهی طراحی شده است. این روش هنگام اجرا و بدون تغییر پارامترهای مدل، با هدایت فعال‌سازی‌ها می‌کوشد حذف دانش را به ورودی وابسته کند.

نویسندگان می‌گویند روش‌های رایج فراموشی برای این مدل‌ها معمولاً به آموزش مبتنی بر گرادیان یا بهینه‌سازی ترجیح متکی‌اند؛ رویکردهایی که به‌گفتهٔ آن‌ها پرهزینه‌اند، برگشت‌پذیری محدودی دارند و ممکن است به دانشی که باید حفظ شود آسیب بزنند. هدف MLLMEraser پرداختن به نگرانی‌هایی مانند داده‌های خصوصیِ به‌خاطرسپرده‌شده، اطلاعات منسوخ و محتوای زیان‌بار است.

چکیدهٔ ارائه‌شده در منبع در میانهٔ توضیح روش قطع می‌شود و دربارهٔ ارزیابی، میزان موفقیت یا محدودیت‌های MLLMEraser اطلاعاتی نمی‌دهد؛ بنابراین نمی‌توان از دادهٔ موجود دربارهٔ کارایی عملی آن نتیجه‌گیری کرد.

این گزارش به کمک هوش مصنوعی تهیه شده است. مطالب براساس منابع درج‌شده تنظیم شده‌اند؛ صحت مستقل همه ادعاها تضمین نمی‌شود.

منبع: arXiv · AI (پیش‌چاپ) — مشاهده منبع اصلی ↗

پیش‌چاپ پژوهشی در arXiv؛ انتشار در این مخزن به معنی داوری همتا نیست