شبكة الكشف عن الأجسام البارزة في مجال الضوء استناداً إلى تعزيز السمات والانتباه المتبادل

إن الكشف عن الأجسام البارزة في مجال الضوء (SOD) هو موضوع بحث أساسي في رؤية الكمبيوتر، ولكن الكشف عن البروز بشكل قوي في المشاهد المعقدة لا يزال يمثل تحدياً كبيراً. نقترح طريقة جديدة دقيقة وقوية للكشف عن الأجسام البارزة في مجال الضوء عبر الشبكات العصبية التلافيفية التي تحتوي على وحدات تعزيز السمات. أولاً، يتم تمديد مجموعة بيانات مجال الضوء من خلال تحويلات هندسية مثل التمديد، والتقطيع، والانعكاس، والتدوير. بعد ذلك، تم تصميم وحدتين لتعزيز السمات لاستخراج السمات من صور RGB وخرائط العمق، على التوالي. يتم تغذية الخرائط المميزة المستحصل عليها إلى شبكة ذات مسارين لتدريب الكشف عن الأجسام البارزة في مجال الضوء. نقترح نهج الانتباه المتبادل في هذه العملية، حيث نستخرج وندمج السمات من صور RGB وخرائط العمق. وبالتالي، يمكن لشبكتنا توليد خريطة بروز دقيقة من صور مجال الضوء المدخلة بعد التدريب. يمكن لخريطة البروز المستخلصة أن توفر معلومات أولية موثوقة لمهام مثل التقسيم الدلالي، والتعرف على الأهداف، والتتبع البصري. تظهر النتائج التجريبية أن الطريقة المقترحة تحقق أداءً ممتازاً في مجموعات البيانات العامة وتتفوق على الطرق الحديثة. كما نتحقق من تعميم الطريقة واستقرارها في التجارب الحقيقية.