研究人员找到了一种从无声视频和静止图像中提取音频的方法

视频通话变得越来越普遍，尤其是在远程和混合办公室的时代。 “让自己静音”和“我相信你被静音了”，已成为日常用语。 事实证明，让自己静音并不像我们想象的那么安全。

东北大学电气、计算机和计算机科学与计算机工程系教授 Kevin Fu 开发了一种从照片和静音视频中提取音频的方法。 傅和他的研究团队创建了 Side Eye，这是一种机器学习辅助工具。 Fu 可以用它来确定与照片在同一房间里说话的人的性别，甚至是确切的话语。

付说：“想象一下，有人制作了一个 TikTok，然后将其静音来配音。”“你有没有好奇过他们到底在说什么？是“西瓜西瓜”还是“这是我的密码” ？ 有人在他们身后说话吗？“你可以听到镜头外的谈话内容。”

来源和详细信息：
https://techxplore.com/news/2023-09-audio-images-silent-videos.html