秒杀读唇辨音我看着薯片就能看出你在说什么
2022-10-20 17:52:05 来源:
有些具有超能力的人能够看口型猜出对方讲什么,当然这样的人已算是凤毛麟角。但是如果说有人能够在隔音的环境下看着一袋薯片还原出你在说什么,你信不信?
你到底在说什么?! 这不是比对牛弹琴还离谱的事情吗?
MIT、微软及 Adobe 的研究人员就做成了这么一件看似超级离谱的事情。其奥秘是研究振动。通过分析视频中声音在物体身上产生的微小振动,研究人员能够还原出环境里的声音信号。在其中一组实验中,研究人员在隔音的情况下,通过 15 英尺开外的高速摄像机拍摄薯片袋的振动还原出了一段讲话音频。除了薯片袋以外,研究人员还在铝箔、装水的水杯、甚至盆栽植物上面进行了试验,均收到了良好的效果。
其原理在于,声音传播到物体上会引起振动,而这种振动的运动可以创造出一种非常微妙的视觉信号,这种信号是肉眼无法识别的。但是计算机却可以捕捉到,其前提是以高于音频的频率采集视频—试验中,研究人员使用的高速摄像机的 FPS(每秒帧数)达到了 2000~6000(普通智能手机拍摄视频的 FPS 一般为 60,最高端的商业高速摄像机则可达到 100000FPS)。
当然,这种高速摄像机也不是普通人所能拥有的。但是研究人员随后又用普通数字摄像机进行了试验。通过利用大多数摄像头传感器的一项怪异的设计,研究人员成功地以 60FPS 的频率推断出高频振动信息。尽管这种还原度没有高速摄像机那么好,但是也足以识别出有几个人讲话、讲话的是男还是女了,甚至已经能掌握到足够精确的讲话者的声学特征了。
显然,这种能力在法律取证和刑侦等方面拥有广泛用途。反过来,鉴于不同物体 / 对象对声音具有不同的振动模式,这种特性又可以催生出一种新型的成像技术。科学的有趣之处正是在于,一开始你研究它是因为酷,但是别人却不断想出新的用途。
《梦幻西游》持续时间最长线上活动为中国喝彩
奥运圣火在希腊点燃的一刻,世界在欢呼!这一把火不但点燃了五大洲的热情,还烧到了网络游戏中! 据悉,《梦幻西游》早在圣火点燃前
2022-10-20 14:52
图文直播:网易《梦幻西游》战略发布会(实录)
网易科技讯 8月6日下午消息,网易公司今天在北京举行神话级大型网游《梦幻西游》战略发布会,网易科技现场图文直播本次发布会。(>;>
2022-10-20 14:25
iPad10定价比iPadAir便宜1200元:但有两大缺点
MacRumors发文指出,iPad 10和iPad Air对比,有两处比较明显的短板。 一是尽管iPad 10采用了和iPad Air相同的Liquid Retina显示屏
2022-10-20 11:59
科技与魔法完美融合!AGON爱攻×《英雄联盟》深度定制电竞显示器
(原标题:科技与魔法完美融合!AGON爱攻×《英雄联盟》深度定制电竞显示器全球首发!) 作为世界领先的游戏显示器和IT配件品
2022-10-20 07:59
2018Autopros上海举行:推动汽车产业升级
5月16日,Autopros2018第十届绿色汽车暨第二届智能汽车决策者峰会暨展览会在上海阿纳迪酒店正式拉开帷幕! 由决策者集团CDMC·汽车
2022-10-20 07:30
复星集团副董事长兼CEO梁信军宣布辞职
(原标题:复星集团副董事长兼CEO梁信军辞职) 3月28日晚上11:05分,复星集团CEO梁信军发全体员工信,称从今日起,因身体原因,将
2022-10-19 07:10