具有AI的5400 fps超级慢动作视频便宜吗？

苏黎世大学的一个研究小组提出了一种方法，该方法使用基于事件的相机和作为视网膜模型开发的神经网络以高质量拍摄5400 fps的超慢动作图像。

如果使用常规相机拍摄24fps视频，则每秒可以拍摄24张照片。如果每秒拍摄太多帧（例如120fps和240fps）并将回放帧设置为24fps或30fps，则慢动作视频的回放速度会比实际速度慢。

研究团队使用的事件摄像机是仅检测入射到传感器的光的亮度变化的摄像机，而不像普通摄像机通过镜头量化并输出入射到传感器的光的亮度。研究团队建立了一个从事件摄像机数据中重建帧的系统，该系统称事件摄像机无法像常规摄像机那样获得清晰的图像，但是具有宽动态范围，无对象偏差以及几微秒的延迟时间。

该研究小组首先开发了一种算法，可从事件摄像机数据中手动重建帧。然后，使用模拟数据，我们训练了一个神经网络，该神经网络可以使用相同的算法重建事件数据并输入实际数据。

用事件相机拍摄并用AI重建的视频是黑白的，但在以与Huawei P20 Pro拍摄的240fps视频相同的质量拍摄的同时，可以很好地捕捉精细物体的形状和运动。

事件摄像机只能识别亮度变化，因此与普通摄像机不同，它们不擅长清晰地捕捉物体的形状。但是，尽管如此，其图像质量还是可以与使用iPad拍摄的视频相媲美的。

人类有两只眼睛，但是相机基本上是单眼的，因此很难识别物体的深度。但是，由研究团队训练的AI也可以从事件摄像机图像中估计物体深度。

根据研究小组的研究，用AI重建的慢动作图像的图像质量比普通慢动作图像的图像质量高20％。如果以5,000 fps或更高的帧速率拍摄视频，则进入传感器的光量会大大减少，从而使普通相机的照明条件变得困难。但是，通过使用读取亮度变化的事件摄像机数据，可以以高帧频捕获高质量的慢动作视频。

大多数可以以高于5,000 fps的帧速率拍摄的相机对于商业目的而言都是昂贵的。专家预计，使用这种技术可以以可承受的价格实现超慢动作HDR视频录制。相关信息可以在这里找到。