چارچوبی برای ارزیابی دقیق‌تر مدل‌های هوش مصنوعیِ خوشه‌های ژنی زیست‌ساختی پیشنهاد شد

خوشه‌های ژنی زیست‌ساختی (BGCs) مجموعه‌ای از ژن‌های کنارهم هستند که ساخت متابولیت‌های تخصصی را رمزگذاری می‌کنند؛ ترکیباتی که منبعی برای آنتی‌بیوتیک‌ها، داروهای ضدسرطان، سرکوب‌کننده‌های ایمنی و مواد زیست‌فعال کشاورزی‌اند. با گسترش مدل‌سازی توالی BGCها با یادگیری عمیق، ازجمله مدل‌های پایهٔ خودنظارتی، نیاز به ارزیابی بهتر این مدل‌ها پررنگ‌تر شده است.

نویسندگان پیش‌چاپی در arXiv چارچوبی برای طراحی معیارهای ارزیابی پیشنهاد می‌کنند. به‌گفتهٔ آن‌ها، معیارهای موجود اغلب بر مجموعه‌داده‌های کوچک و گزینش‌شده و طبقه‌بندی‌های کلی تکیه دارند؛ در نتیجه، تفاوت میان مدل‌ها را به‌خوبی نشان نمی‌دهند و دربارهٔ فایدهٔ آن‌ها برای کاربردهای بعدی اطلاعات محدودی می‌دهند. چارچوب پیشنهادی بر دو ویژگی تأکید دارد: معیار باید بتواند مدل‌ها را با اطمینان آماری از هم تفکیک کند و وظایف معنادار علمی را در سطوح مختلف پوشش دهد.