麻省理工学院最新的“阴影”研究使用阴影来查看相机无法拍摄的东西


iSpeech

人工智能可以很快地通过使用阴影帮助摄像机看到镜头无法看到的谎言。 麻省理工学院计算机科学与人工智能实验室 (CSAIL)的研究人员设计了一种算法,该算法通过分析视线外物体产生的阴影和阴影来“看到”视频帧中的内容。 12月6日,发表了《 通过深矩阵分解实现盲逆光传输 》的研究。

该算法的工作原理几乎就像反向读取阴影木偶一样-计算机看到兔子形状的阴影,然后能够创建创建该阴影的对象的估计。计算机不知道该对象是什么,但是可以提供形状的粗略轮廓。

研究人员使用阴影和几何形状来教程序如何预测光的传输,或场景中光的移动方式。当光线撞击物体时,它会散射,从而产生阴影和高光。研究团队致力于“解读”阴影,阴影和高光的图案。进一步的完善帮助计算机从所有可能的可能性中估计出最合理的形状。

了解了光的移动方式之后,即使对象本身实际上不在视频中,该算法也可以对创建该阴影的对象进行粗略的重构。该算法依赖于两个神经网络,一个用于“解密”,另一个用于生成该对象外观的视频馈送。

该算法创建形状的像素化轮廓以及形状如何移动。这还不足以创建一个可以看到拐角处的间谍相机,但是它确实有助于从CSI制作出这些场景,在此场景中,调查人员会拉出之前似乎没有的细节。

研究人员建议,通过进一步完善,该技术可用于增强自动驾驶汽车视野等应用。通过读取阴影信息,汽车甚至可以在进入摄像机视野之前看到可能要横穿马路的物体。该应用程序还有很长的路要走-研究人员说,目前该过程大约需要两个小时才能重建一个神秘物体。

这项研究基于麻省理工学院其他研究人员的类似工作, 他们使用特殊的激光来观察相机无法做到的 。这项新的研究无需相机,计算机和软件即可使用,而无需任何其他设备。

Previous Entries 亚马逊在《网络周》上使用苹果最新的10.2英寸iPad的价格最低 Next Entries MacBook Pro 16遭受音频“爆裂”并显示重影问题

發表評論