抖音的AI速度：平均每天上线超过100个新特效( 二 ) 作者：李泽南在抖音

在抖音，做自己的特效
要做好一个视频特效工具，你需要实现目标点位检测和追踪，画面的理解，这就需要用到最新的计算机视觉技术。得益于深度学习近期的大发展，我们现在已经可以在手机端上实现实时的真实场景物体识别了，再加上物体分割、渲染效果，使用CG技术将虚拟图像叠加到真实场景中，我们就可以实现各类有趣的效果。
「在影视等行业中， AI技术近年来的提升让特效越来越真实，但同时也提升了成本。在好莱坞视觉大片的制作中，特效的成本可能要占60% ，一秒的特效如果只用一台机器做渲染，可能需要50天。」火山引擎特效技术专家杨辉说道。
在抖音上这么做显然不行，工程师需要在尽可能使用先进技术的同时降低应用的门槛，让更多人能够参与到创作的行列中来。

文章图片
背靠业内最多的用户，抖音的特效功能通过多轮产品迭代，拥有完善的组件模块化、适配、资源下发能力，大幅度提升了应用便利性。抖音特效的稳定性也很高，在接口层面的崩溃率不到10万分之一。
抖音还花费近两年时间从零到一打造了自己的渲染引擎，相比人们熟知的Unity和Unreal ，抖音引擎专门针对短视频AR特效，体积更小，平台适用范围更广，同时也具备高效的渲染效果。
迄今为止，抖音特效开放平台已经包含了100余种算法，覆盖多种场景，支持了字节的40多项业务。
字节跳动研发的高性能机器学习训练平台、端上压缩算法和异构推理引擎，未来都会通过火山引擎面向企业平台进行开放。在活动中，字节跳动宣布面向企业客户开放上万款抖音同款特效，包括猴哥、漫画惊讶脸等热门道具。现在，使用火山引擎的特效工具套件，一名设计师仅需五天就可生产出自己的3D特效。
在火山引擎的特效服务体系中，会有字节跳动的一线专家协助客户打造定制化的解决方案，已有的特效道具资源也被开放，包括拍摄资源、编辑资源和MV模板资源等。
除了短视频，视觉特效的应用场景还有很多。在火山引擎中， AR看车、AR试妆和虚拟形象（数字人）等技术已经落地。未来还有可能出现互动广告等全新交互形式，让人们获得更好的购物体验。
【抖音的AI速度：平均每天上线超过100个新特效】「随着5G时代到来，网络延迟降低，带宽增大，很多计算将不会在本地完成，我们可以把CV算法做得更精准， CG效果更加酷炫。会出现端云协同，多人互动的新类型特效，未来也有可能会出现手机之外的新移动端入口，」杨辉说道。