lswcap
即使是高端智能手机，相机的性能也很难与昂贵的数码相机匹敌。但是，智能手机具有成为出色处理器的武器。这意味着所拍摄的照片可以在现场进行处理。例如，对于iPhone，您可以在以人像模式拍摄照片后虚拟地改变照明。
当然，肖像模式的使用仍然仅限于iPhone中的旗舰机型。因此，谷歌和加利福尼亚大学圣地亚哥分校的研究人员开发了一种技术，该技术将使更常见的智能手机实现类似功能。根据使用情况，它可能比人像模式更方便。
iPhone人像模式使用主机上的多个摄像头拍摄同一场景的几张照片，然后使用软件对其进行分析以创建图像深度（深度）图。深度图只是黑白表示图像中的被摄对象与单个相机的距离。这使软件可以确定前进的距离以及前进的距离。因此，可以通过聚焦于人眼并模糊背景来进行调整。
深度图还用于区分iPhone人像功能中的人脸。以人像模式拍摄的照片也可以稍后转换为虚拟演播室照明或舞台照明。这种照明完全是伪造的，但是看起来很自然，因为有关面部的信息是通过深度图传输到软件的。
研究团队开发的是通过神经网络来学习一张人脸照片在各种光照条件下如何出现。舞台上的人像一个球形一样被304个LED灯包围着，照明灯被一一延迟，而摄像机则被安装在7个方向上。据说如果每个人有很多使用3至5种图案表达拍摄的照片，则据说每人超过10,000份。
此外，模型人还准备了几种模式并将其用作18人的训练数据，包括7名白人男子，7名亚裔男子，2名白人妇女，1名亚裔妇女和1名非洲妇女。研究团队说，训练数据是手动调整的，因此可以将其应用于皮肤黝黑的人的照片。
通过学习以这种方式创建的18个人的数据，添加3到5个面部表情，307个光源和7个摄影机角度，可以在没有深度图的照片中重现面部的所有照明环境。实际上，当您观看视频时，看到照片中的变化是很自然的。
作为参考，在iOS纵向模式下，照明模式下只有6种图案。但是，研究团队已实现的方法是，无论将光源放置在3D空间中的什么位置，对象的脸部颜色和阴影数量之类的情况都取决于虚拟光源的位置而变化。从这个意义上讲，更灵活的应用是可能的。
研究团队说，如果这项技术是640×640像素的图像，则可以在160毫秒内进行处理，因此可以在智能手机屏幕上实时查看。但是，对于最新的智能手机，每个图像大约有1200万像素，通过简单的计算，它是640×640的30倍。第一步仅需5秒钟。可以说，将如此繁重的处理工作付诸实施是剩下的任务。相关信息可以在这里找到。
Add comment