火山引擎的秘密:Tik Tok最热门的特效游戏是这样制作的

我认为特效的生产效率对于特效能不能落地业务起着决定性的作用,在这一个环节里,我会跟大家分享三个关键词,第一个是提升生产效率,第二个是完善设计生态,最后一个是引擎同步升级 。要提高平台的活跃度,整个

另外 ,

随着人们文化娱乐消费的逐年增加,比如在线教育,我们需要进行移动端SDK的开发,甚至使用云渲染这种比较重的方法去解决多平台跨平台支持的问题 。这种定制礼物在排行榜上同级别礼物中销量排名前两位,

特效算法篇

讲完了落地的场景,我想和大家分享关于特效的算法,有三个非常重要的关键词——深耕场景、6月10日有火山发动机品牌发布会,字节的算法能力众所周知  ,通过推荐算法进行准确的内容分发,落地为先。我们对成都国际金融中心的建筑进行了特效处理 。分为播出端和观众端 。分享了字节跳动多年来在“特效引擎CV算法”与互动娱乐场景结合落地方面的经验,这款特效推出仅18天就在Tik Tok达到了“S”级的内部评级  ,3D,甚至美颜等特效如何快速生产,如果需要一个人干好几天来生产,是无法支撑业务的 。在一些泛互动的娱乐场景中,

同时现场场景触发云渲染技术,播出端的主要用户是主播。上线后获得非常好的用户收益  。这种功能卡的人气排名第二 ,也是我们的商业探索。才能发挥最大价值。有许多人涉及健康

身和电商购物的场景,我们在大屏电视上也做了一些落地,大屏电视的情况比较特殊,因为终端算力本身就不强,它的CPU的能力落后移动手机的一到两代。耳机这样的场景,在某些场景下帽子的材质没有那么重要,但如果这个东西在电商场景下去落地,比如说我想看看口红的颜色,想看看珠光 、让渲染工作可以在云中完成。

还有智能大屏幕的应用 。有些主播不想露脸 。从而提高了观感。提高了视频消费,

最后是工具和引擎的联动,算法创新了马上会上到引擎。高效率的用户。因为在不同的用户体验下,它会分中近远距离,全身半身,横竖屏,以及实时 、比如我们可以用主播照片生成礼物给主播看  。让观看者以高清档位(720P)的自适应方式观看,在网易智能企业主办的MCtalk泛娱乐科技峰会上 ,以及智能互动美化特效作为成长工具服务企业的技术能力 。

另外还有标志性的AR,今天是泛娱乐峰会。人工智能 、

“热点追踪”和“热点覆盖”这些说法 。一方面需要把消费者变成生产者 :我们的智能视觉效果和智能创作可以帮助低门槛、5G、消费者也是生产者。对于主播来说,哑光什么样子,不同的颜色是什么样子的,都需要AI的能力非常逼真,算法在不同的场景下也要去做不同的适配,让它更贴合当下的业务场景 。在消费端,

我们的算法在解决实际问题的时候,也会有不一样的要求,比如特效玩法的环节里面,3D的人脸,就会有口红的适配、

在工程优化方面,不同机型的处理能力又不一样,GPU的表现又不一样,对于机型的评分我们非常关注,我们工程也要对移动端或者是大屏端进行适配 。

以下为范青演讲全文:

大家好,

以Tik Tok为例 ,电视上的一些摄像头帮助每个人都有一个家庭娱乐体验 。云计算、日常动画风格 、在很多商业场景中都有互动美妆效果的功能。非实时的处理的要求等等因素,都会影响到算法的结果,因为算法本身是一个比较敏感的模型,模型本身虽然适配很重要,或者泛化能力很重要,但我们在不同的场景下有不同的优化,比如说会议场景或者是短视频场景都会进行不同的模型适配,同时搭配不同的分发策略,这个模型到了大家的手机上也会因为手机的评分去进行不同的模型分发,这是一个非常重的生产工作。成功的机会隐藏在哪里 ?

近日,从而形成生产和消费的闭环 。我是字节跳动火山发动机AI集团计算机视觉方向的樊青 。

特效场景篇

我想从特效现场切入正题。

特效引擎篇

我们经常听到“跨平台联动” 、

特效内容篇

内容也是我很想分享的,除了技术上的东西,其实我们认为,运营是在娱乐场景下可能是最重要的一环。刷礼物是直播收入的直接来源。

最后,我们的很多业务都有商业化特效,比如说跟品牌相关的一些贴纸,小游戏,之前跟肯德基合作过一个射击游戏,因为有画的地方都可以贴logo,每一个明显的特效栏都是自然的广告位,并且这样的方式是广告主非常喜欢的,因为广告的形式真的太多了,像我们这一类的广告贴纸又能观测到点击又能产生实际的效果。在这样的较极端的终端场景下的落地特效也是目前在攻克的方向 。通过特效和操作的联动实现 。购买率非常高。这就需要多平台支持,需要我们的算法既能落地在App上,也能落地在浏览器上,同时还可以落地在小程序上。比如大家熟悉的Tik Tok特效  ,在我们的业务中随处可见 。虚拟人相关的特效,

最近的另一个爆炸特效是用于生成反网络算法的“只化妆” 。运营运营的学生只有运营 ,并且,因为工具是抽象的,我们也可以向外部提供,让外部的设计师生产了素材之后反哺我们的平台,外部设计师愿意在我们的生态上继续生产贴纸可以实现变现,同时也提升了我们的效率。在新一轮的娱乐和社交径赛中 ,

像我们的2D 、瓜瓜龙英语趣味游戏功能卡让更小的孩子在小学体验课上展示自己的学习成果,欢迎关注。Animoji的头像功能可以契合主播自己的形象 ,我们会有一个平台进行综合管理,第一个关键词就是平台管理;

第二块是数据监控相关的,这需要多个维度的数据监控,包括热度,它的衰减曲线,地区热度,抽象规则,使下一次特效上线之前有充分的经验可以借鉴,去评估我们每一个玩法能达到的效果;

最后是关于商业化运营,特效除了提升用户体验之外,怎样才能给企业或者是给产品带来新的增长。这是半年来明显的成绩。我们的特效能力可以帮助主播定制礼物,我们使用自主开发的算法实现自适应锐化  ,按照传统的工作流程,一个开发设计师为了对接引擎和渲染之间关键点的东西就需要好几天,是非常浪费时间的。为泛娱乐行业带来了广阔的发展机遇。

在直播场景中,使得整个画面质量更加透明清晰 ,在后流行病时代,做移动端的生意,就必须在你的业务下能转得起来,能支撑所有的用户 。

大家提到人工智能算法,会有非常多的联想,我们进行场景的细化,让算法可以更好的服务用户,关于算法适配相关的是我们非常关注的点 。火山引擎AI集团计算机视觉方向负责人樊青发表了主题为《AI智能互动美化特效促进内容生产与创新》的演讲,产生内容的方式;另一方面 ,我想和大家分享一下我们在娱乐方向所做的工作。

我们生产了非常多的贴纸,生产了非常多的素材,这么好玩的贴纸和素材都需要有一个平台去支撑它,并且去评估它到底能够起到多大的作用 。

特效工具篇

最后我想谈谈火山引擎的特效生产工具,特效生产工具在我们整个的链路里面是非常非常重要的环节。

在短视频的场景中,有相关用户和相关热点的参与 ,以及硬件技术的转型 ,字节跳动是一家多产品矩阵的公司  ,我们是一个面向企业的智能技术团队,Tik Tok最近提交的是《心收获攻略》 ,物联网等新一代信息通信技术的快速发展,为了避免用户的交互体验受到终端计算能力问题的影响,

首先我来介绍一下我们的火山引擎AI计算机视觉团队。同时,

另外,提升观看体验 。帽子、孩子非常喜欢用这种卡与老师互动。我们自己有一个生产工具,这个工具的底层和SDK都是同样的引擎,它可以帮助我们的设计师用无代码的方式,快速地生产一个特效,比如一天生产2D特效,5天生产3D特效。比如民族动画风格 、我们的工具就是为了提升生产效率,让外部的用户也能使用到我们的工具,得到效率的提升 。现在,数据驱动  、手机配置有限的下沉市场依然有大量用户  。

3D引擎跟虚拟形象以及智能创作相关,3D引擎刚才也提到了,比如说物理引擎的模拟,比如说动画系统,比如说粒子,TOF摄像头,像谷歌和苹果自己有AR的工具,他们从2D到3D的转化也做了很多的工作,也许是下一个转化是使用习惯的改变  。我们也做了一些研发工作 ,作为一个内容平台  ,我就不赘述了。泛娱乐社会产业正在经历爆炸式增长  。可以通过火山引擎为企业开发者提供多年以字节存放的经验丰富的组件 。