谷歌上线视频背景替换功能 已有部分用户体验

谷歌上线视频背景替换功能 已有部分用户体验

Salunce / 2018-03-02 14:07139167

对于PS高手来说,把一张图片中的人物更换背景难度并不是很大。然而,如果是把一个视频中的人物替换背景呢?在目前的技术条件下虽然也有应用,但工作量却是相当的费时费力,电影的制作中就有运用到蓝幕或绿幕背景来实现视频背景的变换,这种技术就叫视频分割,将场景的前景与背景分开,并将它们视为两个不同的视觉层。通过修改或替换背景,创作者可以传达特定的情绪,将自己转移到有趣的位置或增强信息的影响。

不过,谷歌现在采用了另一种人工智能机器学习方法来实现这样的视频替换背景的功能吗,通过设计适用于手机的网络架构和培训程序,来使手机等智能设备自主学习分离场景中的前景和背景,通过成千上万的图像数据辨别学习,从而使机器知道前景和背景具体内容如何区分。例如头发,玻璃,颈部,皮肤,嘴唇等前景元素的像素精准定位以及例如墙面,天空等背景元素的像素替换等内容。

在视频的前景和背景分割中,不仅需要计算考虑到帧与帧之间的关联性和连续性,还有时间的不连续性,比如某个人突然出现在镜头内就和之前视频中的内容没有关联性,这项人工智能技术还要求机器学习考虑到这样的突发情况,从而模拟出快速摄像机的移动和旋转。

目前谷歌发出了这样一套能够跟上视频帧率并可以快速切换背景的系统。常规视频的帧率为30 fps,但谷歌已经在Pixel 2上已经达到了40 fps的帧率,在苹果的iPhone X上更是已经做到了超越100fps的帧率。

这项人工智能视频背景切换技术目前已在YouTube上开始试水,不过目前也只有部分少数用户可以体验到该功能,切换背景的功能有点类似与相机和手机录制视频时的滤镜切换。不过相信这项技术的普及开放会很快到来。


发表评论注册|