ClearShot：从视频中窃取键盘输入

窃听电子通信通常通过使用基于密码学的机制来防止。然而，这些机制并不能防止通过侧信道获取私人信息，例如显示器的电磁辐射或键盘产生的声音。虽然通过观察某人打字来提取相同信息似乎是一项简单的任务，但如果需要自动化，这将变得极其困难。然而，在长时间监控程序或用户活动较长的情况下，需要自动化工具，因为人类每分钟只能重构几个字符。本文提出了一种新方法，基于用户打字的视频自动恢复打字文本。作为该方法的一部分，我们开发了一些新技术，用于运动跟踪、句子重构和错误修正。该方法已在一个名为ClearShot的工具中实现，并在多个现实环境中进行了测试，能够重构出相当大一部分打字信息。