توليد نص قابل للتحكم في عصر ضبط التعليمات

في حين أن معظم الأبحاث حول توليد النص القابل للتحكم قد ركزت على توجيه نماذج اللغة الأساسية، فإن نموذج ضبط التعليمات ورفع المستوى الناشئ يقدم نهجًا بديلاً للتحكم. نقوم بتجميع وإصدار ConGenBench، وهو منصة اختبار لـ 17 مهمة توليد قابلة للتحكم، باستخدام جزء منها لتقييم أداء 9 قواعد وخوارزميات مختلفة على نماذج اللغة المضبوطة بالتعليمات. لدهشتنا، نجد أن الأساليب المعتمدة على رفع المستوى تتفوق على طرق توليد النص القابل للتحكم في معظم المجموعات البيانية والمهام، مما يبرز الحاجة إلى البحث في توليد النص القابل للتحكم مع نماذج اللغة المضبوطة بالتعليمات بشكل محدد. تتطابق الأساليب المعتمدة على رفع المستوى مع أداء الإنسان في معظم المهام الأسلوبية بينما تتأخر في المهام الهيكلية، مما يبرز الحاجة لدراسة قيود أكثر تنوعًا ومهام أسلوبية أكثر تحديًا. لتيسير مثل هذا البحث، نقدم خوارزمية تستخدم فقط مجموعة بيانات المهام ونموذج لغة كبير مع قدرات في السياق لتوليد مجموعة بيانات قيود تلقائيًا. هذه الطريقة ت eliminate الاعتماد على مجموعات بيانات القيود التي تم اختيارها مسبقًا، وبالتالي توسع بشكل كبير نطاق القيود التي يمكن دراستها في المستقبل.