关于阿里巴巴:2022淘宝造物节3D直播虚拟营地技术亮点揭秘

32次阅读

共计 2059 个字符,预计需要花费 6 分钟才能阅读完成。

2022 年 8 月 24 日,淘宝造物节全新亮相!为了摸索下一代互联网沉迷式购物体验,本次造物节除了在线下广交会展馆打造一个两万平⽶全景式的“将来营地”以外,线上首次上线可万人同时在线的虚构互动空间“3D 疯狂城 - 造物节虚构营地”。在 3D 虚构营地里,用户可能以轻量级的形式体验高清的游戏质感,并以虚构人物形象退出到“3D 人货场”的世界,与玩家互动,与 3D 商品互动,满足新一代生产群体爱玩、爱造的诉求,以翻新的技术带来全新的生产体验。

上面咱们一起看看 3D 直播虚构营地的体验 & 技术亮点:

轻量级裸眼 3D“实景游戏”

已经你喜爱一款 3D 游戏,客户端下载好几个 G,想玩新游戏时却不得不卸载,真是太占内存了!在造物节的虚构营地,你疾速加载出一款裸眼 3D、可互动、可直播,甚至还能买买买的高清画面“游戏”,而且你的淘宝 App“一点都没变大”,手机加载速度“嗖嗖的”~

技术亮点:云端老本的挑战

传统的在挪动端做 3D 游戏利用的开发,往往须要在端测集成几十上百 M 的游戏引擎,还须要下载几个 G 的素材资源,这在淘宝 app 内目前是不事实的。采纳云渲染的形式能够很好的解决这一问题,借助云端弱小的 GPU 实现高清简单的场景渲染,用户无需下载大型的资源文件,也不须要装置任何内容,惟一须要的就是播放实时渲染的媒体流。

但这里带来的最大的问题就是云渲染机器的老本问题。为了升高云渲染机器的老本,咱们除了在云渲染方面,做好模型减面、dp 合并、贴图优化、升高视频素材分辨率等性能优化策略。还在机器调度上,联合业务场景做了分时段动静扩缩容策略,最大水平进步机器的利用率。

3D 人与 3D 商品首次在 3D 虚拟世界相遇

已经在“淘宝人生”里穿衣装扮的 3D 用户,第一次“走”出小家,来到了造物节的直播 3D 虚构营地。在这里,你能够自在跳动、点燃篝火,还能够查看 3D 商品,观看卖家直播,与玩家互动交换。3D 人、3D 商品、3D 环境联合在一起,给你沉迷式的微妙营地探险体验。

技术亮点:人货场的搭建与互动

人与人的交互。淘宝人生里的 3D 人物,搁置到 3D 虚拟世界里来,首先须要肯定的资产转换和渲染老本。用户在营地里跑动,波及到用户地位的实时同步。对于用户实时漫游,咱们采纳帧同步的技术,依照固定频率去更新用户地位信息,现实状况下,用户是不会感觉到卡顿的,然而不可避免网络拥塞引起帧间抖动,相邻两次地位同步的工夫超过肯定距离,则会引起跳变。为了补救这种有余,咱们在人物渲染的时候采纳了静止弥补的算法,简略说就是通过算法模仿让用户地位挪动过渡的更加平滑。同时在互动数据的同步方面,采纳了 AOI 网格算法,解决多人同屏数据同步的问题。这样,3D 人物在虚拟世界里随便跑动都会比拟晦涩顺滑。

人与商品的交互。用户想要在虚构场景下自在查看 3D 商品的细节并不容易,咱们有两种计划能够抉择:一种是挪动端渲染,一种是云端渲染。挪动端渲染在淘宝内也有绝对成熟的解决方案,遗憾的是挪动端的渲染引擎和云端渲染引擎并不是一套,所以同一个商品模型并不能通用,同时还要思考模型动静下载,减面优化等问题,为了避开这些劣势,咱们还是抉择了云端渲染的计划,通过动静切换相机视角,实时响应用户端的交互指令,以达到旋转、缩放观看 3D 商品的体验。

1080P 分辨率酷炫高清画质

已经你在手机 App 里尝试页面小游戏,糊得如同马赛克,跑跑跳跳还掉帧。造物节全新 3D 虚构营地,画质高清、成果晦涩,舞台灯光还能动静追踪到身为“明星”的你~

技术亮点:云端渲染的内容制作与实时传输

在云端,咱们采纳空幻引擎做实时画面的渲染,并且联合动静运镜、动静舞台灯光、人物多视角、粒子成果等技术让画面看起来更加酷炫,用户互动感更强。为了把高清的画面传输到用户的手机上,咱们须要综合思考画质,卡顿,延时的均衡,借助大淘宝和阿里云共建的 GRTN 传输网络,以及自研的编解码算法,能够最大水平保障画质的清晰。

交互式虚构画面不卡顿

已经你在淘宝主播直播间,倒数“3、2、1、开抢!”感触到了超低提早秒杀的爽感。但屏幕外的你,却无奈通过交互间接干涉直播间主播的口头。在 3D 虚构营地的你,一边跳舞一边打招呼,还能够点击商家的 3D 商品,观看喜爱的主播解说,实实在在做到了“与商家、主播同框交换”。

技术亮点:全链路超低提早

不同于互不烦扰的画面传输,在交互式下实现超低提早的晦涩体验,咱们须要在百毫秒内实现用户指令的上行、实时画面的渲染、并将渲染好的画面返回到用户手机端。首先,这外面要综合思考用户的机器、网络、接入点状况,来动静抉择离用户最近的推流节点,从而调整云端的推流策略(包含清晰度,编码方式的抉择)。其次,在传输过程中,还需采纳实时带宽反馈、FEC、动静 buffer 等弱网控制策略来反抗网络的抖动,从而使整个链路延时达到正当的地位,最终实现在虚拟世界的交互中,保障晦涩的交互体验。

结语

此次造物节 3D 虚构营地,是淘宝虚构互动空间“3D 疯狂城”系列的首次上线尝试。下一步,咱们将会联合云端实时渲染,XR/CG 技术实现虚拟化场景定制,撑持更大规模的用户实时互动,为消费者带来更沉迷式互动体验。

正文完
 0