توقع ضربات المفاتيح بناءً على العينين للنصوص الطبيعية – تحليل الجدوى

تزداد استخدامات مؤتمرات الفيديو بعد COVID-19، ومن الشائع النظر إلى الشاشة ورؤية شخص يكتب. يمكن إطلاق هجوم جانبي لاستنتاج النص المكتوب من صورة الوجه. في هذه الورقة، نقوم بتحليل جدوى مثل هذا الهجوم، حيث أن هذا هو الاقتراح الأول الذي يعمل مع مجموعة مفاتيح كاملة (50 مفتاحًا) ونصوص طبيعية. نستخدم سيناريوهات وظروف إضاءة ونصوص طبيعية مختلفة لزيادة الواقعية. تتضمن دراستنا 30 مشاركًا، الذين قاموا بكتابة 49,365 ضغطة مفتاح. نقوم بتوصيف تأثير الإضاءة والجنس والعمر واستخدام النظارات. تظهر نتائجنا أن في المتوسط، يتم الكشف عن 13.71% من ضربات المفاتيح دون خطأ، وحتى 31.8%، 52.5% و61.2% يتم تخمينها بأقصى خطأ يصل إلى 1 و2 و3 مفاتيح، على التوالي.