总部位于巴黎的 Prophesee 去年展示了其用于智能手机摄像头的内部基于事件的 Metavision 传感器技术，引起了轰动。该堆栈背后的核心思想是让模糊图像成为过去，并在开发阶段展示了一些令人印象深刻的结果。
在MWC 2024上，其与高通的合作又取得了重大突破。该公司正在神经形态视觉系统领域开展一些认真的工作，宣布其 Metavision 传感器技术现已进入生产阶段。
Prophesee 告诉 Digital Trends，它与索尼合作开发了一款传感器，该传感器利用了高通顶级Snapdragon 8 Gen 3 芯片组提供的定制软件调整和火力。从根本上讲，Metavision 传感器与图像传感器配合以微秒的速度填补了视觉数据空白，为在漆黑和极亮场景中获得无模糊图像打开了大门。
“Prophesee 的专利 Metavision 传感器和人工智能模仿人眼和大脑的工作方式，”该公司表示。 MetaVision 传感器技术基于事件的方法部署了运动模糊消除功能，以确保最终结果不会显示任何运动触发的模糊迹象。
Prophesee 如何尝试消除模糊的照片
大多数智能手机摄像头，即使是顶级旗舰机，都难以应对快速移动的物体——无法保持适当的对焦锁定。结果，图像不仅看起来不合适，而且运动伪影使它们几乎毫无用处。
在具有挑战性的光线条件下或在夜间，当多帧降噪等解决方案无法发挥其真正潜力时，运动模糊变得尤其明显。 Prophesee 声称可以在“快速移动和低光场景”中提供“前所未有的”图像质量。
与典型的智能手机相机传感器的光量在曝光窗口过程中变化不同，Metavision 传感器有利于“永久曝光时间”来连续捕捉运动。该公司声称：“就好像你的手机里有一个每秒拍摄 10,000 张图像的摄像头。”
除了提供与索尼共同开发的定制传感器外，Prophesee 还同样重视软件堆栈和随附的集成服务。 “Metavision Deblur 软件现已进入生产阶段。我们正在将硬件和软件集成到手机中，”该公司告诉 Digital Trends。
其想法是为智能手机行业的参与者提供无缝体验，以便他们在各自的 Snapdragon 驱动设备上部署整个 Metavision 硬件和软件套件。值得注意的是，基准已经设定在旗舰级 Snapdragon 8 Gen 3 芯片上，这显然是由于其原始火力、先进的 ISP 和下一代 AI 能力。
智能手机相机令人兴奋的未来
Prophesee 的解决方案在索尼 IMX636 移动相机传感器上处于全功能状态。目前，该技术仅针对手机的主摄像头进行了测试。然而，该公司告诉 Digital Trends，Metavision 传感器的未来迭代着眼于支持多种传感器，包括超广角和长焦型传感器。
在目前的状态下，Prophesee 基于事件的传感器只能发挥其魔力来生成不模糊的静态图像。但该公司告诉我们，对视频的支持也在未来的路线图上。
Prophesee 发言人告诉 Digital Trends：“它主要是一个视频传感平台，用于捕获和处理各种用例中的运动。”该公司没有具体说明我们何时会在商用智能手机上看到 Metavision 传感器的实际应用。从积极的方面来看，搭载高通 Snapdragon 8 Gen 3 的手机已经上市，而且 Metavision 产品组合现已进入生产准备阶段，因此应该不会等待太久。
从 Prophesee 迄今为止在演示中所展示的情况来看，如果 Metavision 传感器兑现了这些承诺，它可能会为智能手机摄影开启全新的篇章，普通用户将不再需要调整快门速度和其他参数来获得无模糊效果。图片。这是一个令人兴奋的未来。