2022 年 8 月 24 日，淘宝造物节全新亮相！为了摸索下一代互联网沉迷式购物体验，本次造物节除了在线下广交会展馆打造一个两万平⽶全景式的“将来营地”以外，线上首次上线可万人同时在线的虚构互动空间“3D 疯狂城 - 造物节虚构营地”。在 3D 虚构营地里，用户可能以轻量级的形式体验高清的游戏质感，并以虚构人物形象退出到“3D 人货场”的世界，与玩家互动，与 3D 商品互动，满足新一代生产群体爱玩、爱造的诉求，以翻新的技术带来全新的生产体验。
上面咱们一起看看 3D 直播虚构营地的体验 & 技术亮点：
轻量级裸眼 3D“实景游戏”
已经你喜爱一款 3D 游戏，客户端下载好几个 G，想玩新游戏时却不得不卸载，真是太占内存了！在造物节的虚构营地，你疾速加载出一款裸眼 3D、可互动、可直播，甚至还能买买买的高清画面“游戏”，而且你的淘宝 App“一点都没变大”，手机加载速度“嗖嗖的”~
技术亮点：云端老本的挑战
传统的在挪动端做 3D 游戏利用的开发，往往须要在端测集成几十上百 M 的游戏引擎，还须要下载几个 G 的素材资源，这在淘宝 app 内目前是不事实的。采纳云渲染的形式能够很好的解决这一问题，借助云端弱小的 GPU 实现高清简单的场景渲染，用户无需下载大型的资源文件，也不须要装置任何内容，惟一须要的就是播放实时渲染的媒体流。
但这里带来的最大的问题就是云渲染机器的老本问题。为了升高云渲染机器的老本，咱们除了在云渲染方面，做好模型减面、dp 合并、贴图优化、升高视频素材分辨率等性能优化策略。还在机器调度上，联合业务场景做了分时段动静扩缩容策略，最大水平进步机器的利用率。
3D 人与 3D 商品首次在 3D 虚拟世界相遇
已经在“淘宝人生”里穿衣装扮的 3D 用户，第一次“走”出小家，来到了造物节的直播 3D 虚构营地。在这里，你能够自在跳动、点燃篝火，还能够查看 3D 商品，观看卖家直播，与玩家互动交换。3D 人、3D 商品、3D 环境联合在一起，给你沉迷式的微妙营地探险体验。
技术亮点：人货场的搭建与互动
人与人的交互。淘宝人生里的 3D 人物，搁置到 3D 虚拟世界里来，首先须要肯定的资产转换和渲染老本。用户在营地里跑动，波及到用户地位的实时同步。对于用户实时漫游，咱们采纳帧同步的技术，依照固定频率去更新用户地位信息，现实状况下，用户是不会感觉到卡顿的，然而不可避免网络拥塞引起帧间抖动，相邻两次地位同步的工夫超过肯定距离，则会引起跳变。为了补救这种有余，咱们在人物渲染的时候采纳了静止弥补的算法，简略说就是通过算法模仿让用户地位挪动过渡的更加平滑。同时在互动数据的同步方面，采纳了 AOI 网格算法，解决多人同屏数据同步的问题。这样，3D 人物在虚拟世界里随便跑动都会比拟晦涩顺滑。
人与商品的交互。用户想要在虚构场景下自在查看 3D 商品的细节并不容易，咱们有两种计划能够抉择：一种是挪动端渲染，一种是云端渲染。挪动端渲染在淘宝内也有绝对成熟的解决方案，遗憾的是挪动端的渲染引擎和云端渲染引擎并不是一套，所以同一个商品模型并不能通用，同时还要思考模型动静下载，减面优化等问题，为了避开这些劣势，咱们还是抉择了云端渲染的计划，通过动静切换相机视角，实时响应用户端的交互指令，以达到旋转、缩放观看 3D 商品的体验。
1080P 分辨率酷炫高清画质
已经你在手机 App 里尝试页面小游戏，糊得如同马赛克，跑跑跳跳还掉帧。造物节全新 3D 虚构营地，画质高清、成果晦涩，舞台灯光还能动静追踪到身为“明星”的你~
技术亮点：云端渲染的内容制作与实时传输
在云端，咱们采纳空幻引擎做实时画面的渲染，并且联合动静运镜、动静舞台灯光、人物多视角、粒子成果等技术让画面看起来更加酷炫，用户互动感更强。为了把高清的画面传输到用户的手机上，咱们须要综合思考画质，卡顿，延时的均衡，借助大淘宝和阿里云共建的 GRTN 传输网络，以及自研的编解码算法，能够最大水平保障画质的清晰。
交互式虚构画面不卡顿
已经你在淘宝主播直播间，倒数“3、2、1、开抢！”感触到了超低提早秒杀的爽感。但屏幕外的你，却无奈通过交互间接干涉直播间主播的口头。在 3D 虚构营地的你，一边跳舞一边打招呼，还能够点击商家的 3D 商品，观看喜爱的主播解说，实实在在做到了“与商家、主播同框交换”。
技术亮点：全链路超低提早
不同于互不烦扰的画面传输，在交互式下实现超低提早的晦涩体验，咱们须要在百毫秒内实现用户指令的上行、实时画面的渲染、并将渲染好的画面返回到用户手机端。首先，这外面要综合思考用户的机器、网络、接入点状况，来动静抉择离用户最近的推流节点，从而调整云端的推流策略（包含清晰度，编码方式的抉择）。其次，在传输过程中，还需采纳实时带宽反馈、FEC、动静 buffer 等弱网控制策略来反抗网络的抖动，从而使整个链路延时达到正当的地位，最终实现在虚拟世界的交互中，保障晦涩的交互体验。
结语
此次造物节 3D 虚构营地，是淘宝虚构互动空间“3D 疯狂城”系列的首次上线尝试。下一步，咱们将会联合云端实时渲染，XR/CG 技术实现虚拟化场景定制，撑持更大规模的用户实时互动，为消费者带来更沉迷式互动体验。