ما مدى كفاءة نماذج اللغة الكبيرة في التفاوض؟ منصة NegotiationArena والتحليل

التفاوض هو أساس التفاعلات الاجتماعية؛ يتفاوض البشر بشأن كل شيء من أسعار السيارات إلى كيفية مشاركة الموارد المشتركة. مع تزايد الاهتمام باستخدام نماذج اللغة الكبيرة (LLMs) كوكيل نيابة عن المستخدمين البشر، فإن هذه الوكلاء بحاجة أيضًا إلى القدرة على التفاوض. في هذه الورقة، ندرس مدى كفاءة نماذج اللغة الكبيرة في التفاوض مع بعضها البعض. قمنا بتطوير NegotiationArena: إطار عمل مرن لتقييم واستكشاف قدرات التفاوض لوكلاء LLM. نفذنا ثلاثة أنواع من السيناريوهات في NegotiationArena لتقييم سلوكيات نماذج اللغة الكبيرة في تخصيص الموارد المشتركة (ألعاب الفيتو)، وتجميع الموارد (ألعاب التجارة) وبيع/شراء السلع (مفاوضات الأسعار). يتيح كل سيناريو تعدد الأدوار من الحوارات المرنة بين وكلاء LLM للسماح بمفاوضات أكثر تعقيدًا. من المثير للاهتمام أن وكلاء LLM يمكنهم تعزيز نتائج مفاوضاتهم بشكل كبير من خلال اعتماد بعض التكتيكات السلوكية. على سبيل المثال، من خلال التظاهر بأنهم في حالة يأس، يمكن لنماذج اللغة الكبيرة تحسين عوائدهم بنسبة 20% عند التفاوض ضد GPT-4 القياسي. كما نقوم بت quantifying السلوكيات التفاوضية غير العقلانية التي أظهرها وكلاء LLM، والعديد منها يظهر أيضًا في البشر. معًا، يقدم بيئة جديدة للتحقيق في تفاعلات نماذج اللغة الكبيرة، مما يمكّن رؤى جديدة حول نظرية العقل، واللامعقول، وقدرات التفكير.