هوش مصنوعی

ROSTrans عملکرد مدل‌های زبانی را در مهاجرت کدهای ROS1 به ROS2 می‌سنجد

پژوهشگران بنچمارکی با ۱۰۸ وظیفهٔ تکمیل کد معرفی کرده‌اند؛ آزمونی که فراتر از نوشتن کد، هماهنگی گره‌ها و رفتار نرم‌افزار پس از اجرا را هم در نظر می‌گیرد.

۱ دقیقه مطالعه

پیش‌چاپی در arXiv از ROSTrans، بنچمارکی برای ارزیابی مدل‌های زبانی بزرگ در مهاجرت کد از ROS1 به ROS2، رونمایی می‌کند. به‌گفتهٔ پژوهشگران، توانایی این مدل‌ها در تولید کدهای تخصصی بررسی شده، اما عملکردشان در توسعهٔ نرم‌افزار رباتیک، به‌ویژه برای Robot Operating System (ROS)، کمتر شناخته شده است. بخش موجود از چکیده می‌گوید ROSTrans شامل ۱۰۸ وظیفهٔ تکمیل کد است؛ اطلاعات ارائه‌شده جزئیات بیشتری دربارهٔ نتایج ارزیابی یا عملکرد مدل‌ها ندارد.

این بنچمارک به چالش‌هایی می‌پردازد که در آزمون‌های معمول کدنویسی کمتر دیده می‌شوند: هماهنگی پیچیده میان گره‌ها، پیکربندی middleware و معناشناسی چرخهٔ عمر. برخی ویژگی‌های مهم درستی کد نیز تنها پس از راه‌اندازی گره‌های مهاجرت‌یافته و برقراری ارتباط میان آن‌ها قابل مشاهده‌اند.

این گزارش به کمک هوش مصنوعی تهیه شده است. مطالب براساس منابع درج‌شده تنظیم شده‌اند؛ صحت مستقل همه ادعاها تضمین نمی‌شود.

منبع: arXiv · AI (پیش‌چاپ) — مشاهده منبع اصلی ↗

پیش‌چاپ پژوهشی در arXiv؛ انتشار در این مخزن به معنی داوری همتا نیست