نموذج لغوي جديد من آبل يكتب نصوص طويلة بسرعة فائقة

FS-DFM: توليد سريع ودقيق للنصوص الطويلة باستخدام مطابقة التدفق المنفصلة قليلة الخطوات

حددت دراسة مشتركة بين باحثين من أبل وجامعة ولاية أوهايو طريقة جديدة تسمى مطابقة التدفق المنفصلة قليلة الخطوات FS-DFM، التي تتخطى المسار التكراري التقليدي لنماذج الانتشار وتتيح توليد النتيجة النهائية دفعة واحدة وبجودة عالية مقارنة بالنماذج التي تعتمد على توليد الرمز الواحد خطوة بخطوة.

أثبت الباحثون أن FS-DFM يستطيع كتابة مقاطع كاملة الطول في ثمان جولات تحسين سريعة، مما يضاهي جودة نماذج الانتشار التي تحتاج أكثر من ألف خطوة.

اعتمد الباحثون إطاراً عملياً يتألف من ثلاث خطوات رئيسية، فدرّبوا النموذج على التعامل مع ميزانيات مختلفة من عدد التكرارات، ثم استخدموا نموذجاً معلماً توجيهياً لمساعدة النموذج في إجراء تحديثات أكبر وأكثر دقة في كل تكرار دون تجاوز النص المقصود، وأخيراً عدّلوا آلية التكرار ليصل النموذج إلى النتيجة النهائية بخطوات أقل وأكثر ثباتاً.

تشير النتائج إلى أن FS-DFM قابلة للمنافسة مع نماذج الانتشار التي تتطلب آلاف الخطوات، مع تحقيق جودة مماثلة في ثمانية جولات فقط.

تخطط الفرق لإصدار نقاط تحقق للرموز والنماذج بهدف تسهيل إعادة الإنتاج وإجراء مزيد من الأبحاث.