پژوهش
بررسی توهم در پاسخ‌های مالی هوش مصنوعی فراتر از امتیاز دودویی
پژوهشی دربارهٔ پاسخ‌گویی به پرسش‌های مالی نشان می‌دهد پاسخ‌های توهم‌آمیز در داده‌های بررسی‌شده بیش از دو برابر پاسخ‌های وفادار طول داشته‌اند؛ نویسندگان ارزیابی خطاها بر اساس نوع را پیشنهاد می‌کنند.
پژوهشی پیش‌چاپ در arXiv، تشخیص توهم در پاسخ‌های مدل‌های زبانی به اسناد مالی را بر پایهٔ نوع خطا بررسی می‌کند. نویسندگان می‌گویند ارزیابی‌های رایج با یک امتیاز دودویی مشخص نمی‌کنند چه خطاهایی رخ داده یا چرا؛ موضوعی مهم در کاربردهایی که پاسخ نادرست می‌تواند بر تصمیم‌های سرمایه‌گذاری، رعایت مقررات یا ارتباط با مشتری اثر بگذارد.
پژوهشگران ۱۵٬۴۴۳ جفت پاسخ وفادار و توهم‌آمیز را در بنچمارک PHANTOM، مبتنی بر اسناد طولانی کمیسیون بورس و اوراق بهادار آمریکا (SEC)، بدون استفاده از آشکارساز بررسی کردند. در این مجموعه، پاسخ‌های توهم‌آمیز بیش از دو برابر طولانی‌تر بودند. همچنین، میزان اتکای واژگانی به متن منبع دو گروه را از هم متمایز می‌کرد، اما فقط به این دلیل که پاسخ‌های وفادار در این ویژگی توزیعی دوموجه داشتند.
چکیدهٔ در دسترس جزئیات بخش بعدی مطالعه یا نتایج ارزیابی آشکارسازها را بیان نمی‌کند.
این گزارش به کمک هوش مصنوعی تهیه شده است. مطالب براساس منابع درج‌شده تنظیم شده‌اند؛ صحت مستقل همه ادعاها تضمین نمی‌شود.
منبع: arXiv · AI (پیش‌چاپ) — مشاهده منبع اصلی ↗
پیش‌چاپ پژوهشی در arXiv؛ انتشار در این مخزن به معنی داوری همتا نیست
رد این داستان در رادار
خبرهای مرتبط از آرشیو منتشرشده