关于视频云:揭秘2022冬奥黑科技阿里云视频云Cloud-ME如何实现全息会面

34次阅读

共计 2994 个字符,预计需要花费 8 分钟才能阅读完成。

2022 北京冬奥会本是一届不凡的存在,这是有史以来第一次将奥运会所需的全副外围零碎全面上云,以数字化技术发明奥运的新纪元。

但绿色奥运不止如此,在面临 Covid-19 限度和物理隔膜之下,千里之外,人与人的会面能够透过绿色科技之光而以全息状态实现,这便是阿里云视频云基于 AliRTC(音视频通信技术)推出的云上翻新解决方案——阿里云聚“Alibaba Cloud ME”,第一次在百年奥运史上逾越物理空间,发明了人与人之间的“云聚”时刻。(以下简称 Cloud ME)

云聚现场的汩汩之温—Cloud ME 发明传奇会面

“Cloud ME”本意登程,为物理空间限度下渴望摸索实在会面感的人们,提供沉迷交互体验,使他们可能以真人 3D 状态见面,并享受彼此的实时对话与交互。

就在冬奥会刚刚揭幕,身处北京闭环内的国际奥委会主席巴赫通过 Cloud ME“现身”2022 北京新闻核心云聚展区,与远在上海的阿里巴巴团体董事会主席兼 CEO 张勇,隔空“云聚”,以全息状态同台送出奥运寄语,又在“现场”隔空传递冬奥火炬,于泛滥媒体记者的见证下,Cloud ME 让所有交谈和交互犹如真人临于现场,氛围实在而有流动感,惊叹元宇宙的提前到来,又深感科技涌出的汩汩之温。


远隔 1300 公里的巴赫与张勇学生,以全息状态现身北京新闻核心,同台云拜年。

在奥运世纪见面之外,更有温度的,是透过 Cloud ME,让因疫情拆散别北京、上海两地的医护人员家庭得以在“云上全家团圆”,孩子看到父母如临眼前的欢喜之相,和一张穿梭空间的全家福,浓浓暖意,足以霎时消融这背地所有技术的艰苦演进。而这一刻,技术也挥着人文的熠熠之光。


通过 Cloud ME,一场特地的见面

整个会面过程通过 Cloud ME,将会面者们的全身图像投射到近程全息舱中,以展现他们的 3D 形象,从而促成多人异地的近程会面交互。

Cloud ME 全息舱安装简略,除典型的演播室设施(如摄像机和计算机来捕获镜头)之外,基于弱小的云计算能力,不须要任何额定的现场 IT 基础设施或优化的互联网带宽来助力录制和传输。正是 Cloud ME 易于落地的个性,让虚拟现实会面能够在更有限的场域向更宽泛的受众凋谢,发明更多样、更有温度的云聚可能。


一张非凡而浓浓暖意的“全家福”

就此,无论多想见的人、多边远的客户、多难相聚的团队,都能透过阿里云视频云的 Cloud ME,以云聚之力,咫尺相见。

Cloud ME 的魔法浮现—发丝级全息复刻 & 眨眼般超低延时

基于阿里巴巴在数字化和智能技术的撑持,Cloud ME 制作的音视频将在阿里云上进行压缩、传输、解决和渲染,在这过程中,经久打磨的 RTC 技术起到最为要害的作用,而阿里云先进的计算能力和宽泛的寰球网络覆盖也为 RTC 提供了坚实基础。

实现多人异地全息会面,Cloud ME 的操作落地简略,但技术非同寻常。

https://www.youku.com/video/X…
冬奥黑科技 Cloud ME 的技术实现

传奇过程,如下所现:

首先,在影像采集环节,摄影机采集的画面是无奈间接在播放端进行全息成像的,所有画面须要通过先进的编码器进行深度压缩,并在实时传输协定和 QoS(Quality of Service)抗丢包策略的保障下发送到阿里云的音视频通信(RTC)网络,画面最终上传的格局和尺寸与一般 4K 电影无异。

随之,当画面达到云端之后,须要借助云上弱小的解决能力实现包含转码、渲染、场景重建、光影解决在内的简单流程,实现从“立体”到“全息”的变质,以真人 1:1 等比虚拟化复刻,生成 3D 全息人物,以高清形式重建所有互动细节,包含人物的微面部表情和服装纹理,达到“发丝级”全息全尺寸复刻,塑造全实在交互的沉迷感,所有犹如身临其境。

天下文治,唯快不破。在如此简单和大跨度的技术链路上,为了实现顺畅的会面成果,技术实现的要害也在于“速度”,而保障“速度”的要害则是阿里云笼罩寰球的音视频传输网络 GRTN(Global Realtime Transport Network),及其在视频编解码、网络传输、超大规模音视频解决和调度等方面的核心技术。

基于这些技术,影像画面传输和解决的全过程,包含 SDK 编码、实时传输,云上解决和渲染,端侧解码和成像,仅需在眨眼间的 200 毫秒内即可实现,体感上与咱们日常交换互动的综合体感雷同,毫无延时顿感,极度实在。

由此,Cloud ME 发丝级的全息全尺寸复刻、眨眼般的超低延时,和稳若磐石的网络传输力,让更多交互奇观由而产生。

AliRTC 极致技术的普惠之光—“零解决”时代趁势而来

Cloud ME 的技术实现,外围依靠于阿里云视频云曾提出的 AliRTC“零解决”解决方案,即通过“云解决 + 端渲染”技术,让硬件端只进行简略的采集,传输,播放,同时,所有的简单工作全副集中在云上实现,让终端实现“零解决”。

这是百年奥运史上,第一次利用云上全息 RTC 技术,实现跨场景近程会面的技术利用,在疫情期彻底突破了物理空间隔膜。通过 Cloud ME,可将运动员、赛事工作人员、志愿者和媒体敌人们“瞬移”到指定地点,实时交互沟通。

湖南卫视《新闻大求真》栏目主持人在体验 Cloud ME 的过程中,就将北京冬奥会现场的志愿者”瞬移“到”节目现场“,进行“面对面”的超级采访,实现了时空同步。来自清华大学的志愿者许雯钧说道:“这感觉就像咱们面对面交换一样!”。


湖南卫视《新闻大求真》栏目对 Cloud ME 进行现场体验与节目采访

阿里云视频云的“Cloud ME”既能够利用在奥运会场景下,也能够在奥运会之外,向更多参与者和球迷宽泛凋谢,让他们在虚拟现实中体验实在、沉迷、趣味的全息交互,真正开启百年奥运的新内容与新交互。

不仅如此,基于阿里云 RTC 的寰球部署,还可实现“一地上线,多地同步互动出现”的场景现象,领有“分身不再乏术”的景象级能量。

事实证明,RTC 音视频通信是一项有助于世界无效连贯的关键技术。借助阿里云的寰球网络和视频云的智能算法,阿里云视频云旨在将音视频通信能力带入更宽泛的利用场景中,不仅在互动娱乐、智慧教育、视频会议,还有更多更具价值的企业服务和更具想象力的沉迷交互场域。

从图文到音视频,社会的第一次交互改革产生于 2014 年,而 RTC 技术在 2017 年驱动了互动视频技术和在线互动商业的颠覆性倒退。随着 5G 技术的倒退还会带来新一轮的交互演进,如 VR 近程合作、虚拟现实互动等。

在云厂商中,阿里云视频云曾率先提出“云解决 + 端渲染”技术,通过实时通信与云上解决的技术联合,前瞻性地解决了新交互体验因端侧算力受限而无奈实现的虚构交互场景难题, 推动终端“零解决”时代趁势而来,而 Cloud ME 即是阿里云视频云在这一畛域的翻新实际。

将来,AliRTC 会充分利用云端一体的混合计算能力,助力更多翻新场景的商业化落地,例如全息演唱会、虚构演唱会、翻新云展会,全息交互娱乐等等,让场景向更低延时、更沉迷交互的极致化体验演进。

RTC 是技术,科技是工具,而其所有的起点,是人文涵蕴的和煦,那是突破尔疆我界的有形之力,是人与人、人与物、人与世界彼此存在的咫尺之间。

期待 Cloud ME,期待 AliRTC,期待将来。


「视频云技术」你最值得关注的音视频技术公众号,每周推送来自阿里云一线的实际技术文章,在这里与音视频畛域一流工程师交换切磋。公众号后盾回复【技术】可退出阿里云视频云产品技术交换群,和业内大咖一起探讨音视频技术,获取更多行业最新信息。

正文完
 0