Emma

ملخص:

  • يمكن لنماذج اللغة الذاتية التكرارية أن تتعلم تعبئة النصوص ببساطة عن طريق نقل نطاق من النص من منتصف المستند إلى نهايته.
  • تدريب النماذج باستخدام نسبة كبيرة من البيانات المحولة لا يؤذي قدرتها التوليدية الأصلية من اليسار إلى اليمين، وهو مفيد وبسيط وفعال.