المحولات: التفسير الإحصائي، البُنى والتطبيقات

لقد تم الاعتراف بالمحولات كأدوات قوية لتحليل مهام متعددة بفضل فضاءات الانتباه متعددة الرؤوس المتقدمة، مثل معالجة اللغة الطبيعية (NLP)، ورؤية الحاسوب (CV)، والتعرف على الكلام (SR). مستوحين من تصاميمها الوفيرة ووظائفها القوية في تحليل بيانات الإدخال، نود أن نبدأ من البُنى المتنوعة، ثم نتابع التحقيق في آليتها الإحصائية والاستدلال، وبعدها نعرض تطبيقاتها على المهام السائدة. الآليات الإحصائية الأساسية أثارت اهتمامنا ودفعتنا للتحقيق فيها على مستوى أعلى، وستركز هذه المراجعة على أسسها الرياضية ثم تستخدم هذه المبادئ لمحاولة تحليل أسباب أدائها الممتاز في العديد من سيناريوهات التعرف.