YouTube Stories新AI工具可在手机上即时置换影片背景

Google Research上周宣布将于YouTube Stories中新增一可即时置换影片背景的工具，且可直接于行动装置上执行，让影片创作者可打造更具张力的视觉效果。

YouTube Stories是YouTube的短影片功能，它让创作者直接于行动装置上制作长度只有15秒的影片，这些短影片可设定在24小时之后就消失，也能长驻至作者移除它。只是YouTube Stories目前仍属封闭测试阶段，尚未开放给所有YouTube创作者使用。

不管是电影导演或影片创作者都经常使用影片切割技术来分离影像中的背景与前景，但要变更或置换背景的程序既繁琐又旷日废时，使得Google决定利用人工智能技术，建立一个适用于手机的解决方案，且完全不需其它的设备。

此一新工具是训练卷积神经网络来解决分割任务，目的在于建立各种可比现有分割模型速度快上10到30倍的轻巧模型，这类的模型可在每秒30张画面的速度下进行即时推论，相关模型应能利用时间冗余并展现时间的一致性，并以高品质的注释带来高品质的分割结果。

经过训练后，该卷积神经网络于iPhone 7可以每秒播放100个以上画面（100+ FPS）的速度执行，在Pixel 2上的执行速度也有40+ FPS，且准确度也达到94.8%，让创作者能够很顺畅地置换YouTube Stories背景。

迄今Google Research已建立许多可即时更换的影片背景，例如早晨、晚上、漏光，或是摄影棚效果等。虽然Google Research目前借由YouTube Stories测试该工具，但之后将会创造更多的效果，也会整合到更广泛的其它Google扩增实境（AR）服务上。