هوش مصنوعی
سامانه‌ای برای پاسخ‌گویی به پرسش‌هایی که به چند فصل کتاب سر می‌زنند
پژوهشگران مجموعهٔ CrossChapterQA را با ۱٬۸۵۳ پرسش از ۱۴ کتاب در مالکیت عمومی معرفی کرده‌اند و از آن برای ساخت LadderRAG استفاده کرده‌اند؛ سامانه‌ای که پاسخ‌گویی به هر پرسش را کمتر از یک سنت برآورد می‌کند.
بسیاری از پرسش‌ها دربارهٔ یک کتاب را نمی‌توان از یک بخش پاسخ داد؛ برای نمونه، باید نشانه‌ای مانند سرفه را در چند مقطع از زندگی یک شخصیت دنبال کرد. مجموعهٔ CrossChapterQA برای ارزیابی این نوع پرسش‌ها ساخته شده است. هر پرسش مشخص می‌کند کدام دو تا شش فصل برای پاسخ لازم‌اند، چه رابطه‌ای میان آن‌ها باید دنبال شود و شواهد مربوط به هر فصل کجاست. در میانهٔ مجموعه، فصل‌های موردنیاز نیمی از کتاب را پوشش می‌دهند. برای هر پرسش نیز دو پاسخ مرجع مستقل تهیه شده که ارزیابی آن‌ها به‌صورت بی‌اطلاع از منبع پاسخ انجام شده است.
پژوهشگران با استفاده از این مجموعه، LadderRAG را ساخته‌اند؛ سامانه‌ای که کتاب را در سه سطحِ قطعه‌های متن، خلاصه‌ها و کارت‌های کلی کتاب نمایه می‌کند. هزینهٔ نمایه‌سازی هر کتاب حدود ۰٫۴۱ دلار و هزینهٔ پاسخ‌گویی به هر پرسش کمتر از یک سنت اعلام شده است. نسخهٔ نخست سامانه عمدتاً در بازیابی اطلاعات شکست می‌خورد. گروه آن را چهار بار بازطراحی کرد و در این روند از داوری یک مدل زبانی و تحلیل پاسخ‌های ناموفق بهره گرفت. چکیدهٔ در دسترس در این منبع ادامهٔ شرح طراحی نهایی را ارائه نمی‌کند.
این گزارش به کمک هوش مصنوعی تهیه شده است. مطالب براساس منابع درج‌شده تنظیم شده‌اند؛ صحت مستقل همه ادعاها تضمین نمی‌شود.
منبع: arXiv · AI (پیش‌چاپ) — مشاهده منبع اصلی ↗
پیش‌چاپ پژوهشی در arXiv؛ انتشار در این مخزن به معنی داوری همتا نیست
رد این داستان در رادار
خبرهای مرتبط از آرشیو منتشرشده