تقدير معدل ضربات القلب عن بُعد قائم على بنية المحول مع مفكك الاتصال متعدد التخطي: الطريقة والتقييم في العالم الحقيقي

يعد معدل ضربات القلب علامة حيوية أساسية لتقييم صحة الإنسان. لقد أصبح رصد القلب عن بُعد باستخدام الأجهزة المتاحة بأسعار معقولة ضرورة في القرن الحادي والعشرين لمنع أي موقف غير مؤسف ناتج عن وتيرة الحياة السريعة. في هذه الورقة، نقترح طريقة جديدة قائمة على بنية المحول مع مفكك الاتصال biLSTM متعدد التخطي لتقدير معدل ضربات القلب عن بُعد من الفيديوهات. تستند طريقتنا إلى تغير لون البشرة الناجم عن التغير في حجم الدم على سطحها. يتكون إطار عمل تقدير معدل ضربات القلب المقدم من ثلاث خطوات رئيسية: (1) تقسيم منطقة الوجه ذات الاهتمام (ROI) بناءً على المعالم التي تم الحصول عليها بواسطة 3DDFA؛ (2) استخراج الميزات المكانية والعالمية؛ و (3) تقدير قيمة معدل ضربات القلب من الميزات المستخرجة بناءً على الطريقة المقترحة. تبحث هذه الورقة في أي مستخرج ميزات يقدم أداءً أفضل من خلال توضيح التغير في لون البشرة المتعلق بمعدل ضربات القلب بالإضافة إلى العدد الأمثل من الإطارات اللازمة لتحقيق دقة أفضل. تم إجراء تجارب باستخدام مجموعتين من البيانات المتاحة للجمهور (LGI-PPGI وVision for Vitals) ومجموعة بياناتنا المعتمدة على العالم الحقيقي (12 فيديو تم جمعها بواسطة أربعة سائقين). أظهرت التجارب أن نهجنا حقق نتائج أفضل من الطرق المنشورة سابقًا، مما جعله في حالة فنية جديدة على هذه المجموعات من البيانات.