پژوهش

پژوهشگران پنج آزمون برای سنجش سوگیری ملی در مدل‌های زبانی به‌کار گرفتند

پیش‌چاپی در arXiv با بررسی ۷۲۲ سند رسمی شورای امنیت سازمان ملل، روشی برای ارزیابی سوگیری مدل‌های زبانی بزرگ در کاربردهای مرتبط با روابط بین‌الملل معرفی می‌کند.

۱ دقیقه مطالعه

پژوهشگران در پیش‌چاپی تازه، سوگیری مدل‌های زبانی بزرگ نسبت به کشورها را با پنج آزمون مکمل بررسی کرده‌اند. به‌گفتهٔ چکیده، ارزیابی‌های پیشین اغلب مرجع بی‌طرفانهٔ مشخصی نداشتند و همین موضوع سنجش کمی و مقایسهٔ نتایج در شرایط مختلف را محدود می‌کرد.

این مطالعه بر مجموعه‌ای گسترش‌یافته شامل ۷۲۲ سند رسمی شورای امنیت سازمان ملل تکیه دارد و پنج مسیر بروز سوگیری را می‌سنجد: رتبه‌بندی دیدگاه‌ها (WOW)، مرتب‌سازی تداعی‌ها (AK+-)، شبیه‌سازی رأی‌گیری (PVS)، نسبت‌دادن مخالفت (F-Oppose) و قاب‌بندی (Headliner). چکیده می‌گوید پژوهشگران برای ارزیابی مبتنی بر مرجع، یک معیار بی‌طرفانه را صریحاً تعریف کرده‌اند؛ اما متن در دسترس جزئیات این معیار و نتایج آزمون‌ها را ارائه نمی‌کند.

این گزارش به کمک هوش مصنوعی تهیه شده است. مطالب براساس منابع درج‌شده تنظیم شده‌اند؛ صحت مستقل همه ادعاها تضمین نمی‌شود.

منبع: arXiv · AI (پیش‌چاپ) — مشاهده منبع اصلی ↗

پیش‌چاپ پژوهشی در arXiv؛ انتشار در این مخزن به معنی داوری همتا نیست