نموذج الجذب والانجذاب اللفظي

تقدم هذه الورقة أساليب جديدة تعتمد على العائلات الأسية لنمذجة العلاقات بين الكلمات في النصوص والكلام. في حين افترضت الأعمال السابقة أن تأثيرات إحصائيات التزامن الكلماتي ثابتة على مدى نافذة من عدة مئات من الكلمات، نظهر أن تأثيرها غير ثابت على نطاق زمني أصغر بكثير. تكشف البيانات التجريبية المستمدة من النصوص الإنجليزية واليابانية، فضلاً عن الكلام المحادثاتي، أن "الجاذبية" بين الكلمات تتناقص أسياً، في حين أن القيود الأسلوبية والنحوية تخلق "نفوراً" بين الكلمات يثني عن التزامن الوثيق. نظهر أن هذه الخصائص توصف بشكل جيد بواسطة نماذج بسيط من المزيج تعتمد على توزيعات أسية من مرحلتين يمكن تدريبها باستخدام خوارزمية EM. يمكن بعد ذلك دمج توزيعات المسافات الناتجة كميزات معاقبة في نموذج لغة أسي.