نهج تعلّم التعزيز لإدارة الوصول في الشبكات الخلوية اللاسلكية

في تطبيقات المدن الذكية، تحتاج أعداد كبيرة من الأجهزة إلى الاتصال بطريقة مستقلة. يحدد مشروع الشراكة من الجيل الثالث (3GPP) أنه يجب استخدام اتصال نوع الجهاز (MTC) للتعامل مع نقل البيانات بين عدد كبير من الأجهزة. ومع ذلك، فإن معدلات نقل البيانات متغيرة للغاية، مما يؤدي إلى مشكلة الازدحام. لمواجهة هذه المشكلة، يُوصى باستخدام حظر فئة الوصول (ACB) لتقييد عدد محاولات الوصول المسموح بها في نقل البيانات من خلال استخدام معلمات استراتيجية. في هذه الورقة، نقوم بنمذجة مشكلة تحديد المعلمات الاستراتيجية باستخدام خوارزمية تعلّم التعزيز. في نموذجنا، يتطور النظام لتقليل كل من معدل التصادم ووقت الوصول. تظهر النتائج التجريبية أن نظامنا يحسّن أداء النظام من حيث معدل نجاح الوصول، ومعدل الفشل، ومعدل التصادم، ووقت الوصول.