关于音视频拼接:网易云信流媒体首席架构师新一代音视频技术架构如何构建

前言

5G 与 AI 时代已来，音视频技术继续迭代降级，网易云信推出了全新一代音视频技术架构。新一代音视频架构有哪些核心技术？各技术在线上场景又有哪些落地实际计划？

网易翻新企业大会公布了新一代音视频技术架构，进行了全流程的技术升级，包含新一代音视频交融通信服务端零碎、新一代音视频 SDK 以及新一代音视频引擎。本文整顿自网易云信流媒体首席架构师、多媒体开发专家吴桐的大会现场实录。

本次分享将从以下几个方面开展:

• 音视频发展趋势；
• 新一代音视频架构降级；
• 新一代音视频核心技术；
• 新一代音视频场景落地；
• 总结与瞻望；

2020 音视频发展趋势

2020 年注定是不平庸的一年，从年初疫情就曾经感触到这个变动，明天可能到场和大家面对面交换也是很不容易的。看到海内人民当初还在生灵涂炭中，咱们要感激祖国的弱小。往年新冠疫情的突发，也让音视频业务失去一个井喷式的倒退，特地是在家办公期间，视频会议成为每个人的刚需，也造就了用户应用视频会议的习惯。

当然除了疫情以外，5G 的到来以及其大带宽、低延时、海量连贯等特点也进一步丰盛了音视频的利用场景，不仅在传统的视频会议、娱乐社交、在线教育、金融和 IoT 等场景下持续蓬勃发展，还带动了云面试、云相亲、云游戏等新兴畛域。当然，各场景对音视频体验也提出更多差异化的要求：更低的提早、更高的并发等。视频会议、在线教育和云游戏这几个场景，在将来几年的增幅都十分大，特地是云游戏，在 2023 年会达到千亿的规模，所以我置信将来的音视频行业还将继续高速增长，将来有有限的机会期待音视频行业的从业人员。

随着音视频市场的增长，网易云信也在一直晋升本人在音视频畛域的外围竞争力。在 5G 和 AI 技术改革的推动下，网易云信在原有音视频架构的根底上迭代降级，推出了新一代音视频技术架构，对音视频全流程都做了重大降级，次要包含三大架构降级，别离是：新一代音视频交融通信服务端零碎、新一代音视频 SDK 以及新一代音视频引擎。

网易云信新一代音视频架构降级

新一代音视频交融通信零碎架构

首先看一下网易云信在新一代音视频交融通信服务端零碎的整体架构图。

1 流媒体传输与解决服务

在这个框架图两头是流媒体传输和解决服务，涵盖了边缘媒体接入、实时传输网、流媒体解决服务以及直播点播服务。

在新一代架构中，流媒体零碎能够 兼容各类协定 ，边缘媒体服务器既反对云信 SDK 的接入，也反对规范 Web 端应用 WebRTC 接入；同时，云信 自研了 SIP 网关服务器，实现了 SIP、PSTN 的接入；应用通用媒体网关实现了规范 RTMP 推流工具、小程序、RTSP 监控摄像头的接入。

在边缘媒体服务零碎收到各协定客户端的媒体数据包当前，它会借助云信自研的实时传输网的边缘节点和路由节点进行寰球的实时媒体数据散发，保障端到端的最优体验。同时利用流媒体解决服务的通用 MCU 和转码服务器，能够将媒体流混合后旁路转推到云信互动直播服务器，再通过云信直播的交融 CDN 零碎进行散发；还能够在云端进行录制后，存储到云信的点播服务零碎中。

2 全局流媒体管制服务器

架构图的左侧是全局流媒体管制服务，它包含了：频道与流治理服务、对立媒体调度服务和实时传输网调度服务，它是整个音视频交融通信零碎的大脑，由它来动态控制整个零碎的运行。

3 大数据与配置服务

架构图的右侧是云信的大数据与配置服务零碎，其中全局大数据分析和开掘零碎，负责全链路采集的数据处理、告警和品质通明，并利用大数据挖掘的后果领导全链路各模块算法和策略的制订。另一个是咱们智能全局配置管理和下发服务，负责对各类云端参数的下发，包含 QoS 参数、音视频编解码参数以及 A/B Test 的相干开关。

这里，咱们对网易云信的新一代音视频交融零碎架构做个总结：

• 首先，新一代音视频交融通信零碎是一个混合了实时媒体边缘服务器、实时传输网以及交融 CDN 的一个 混合组网零碎，它能够满足用户对场景和网络实时性的各类需要；
• 第二，咱们将媒体边缘服务器和媒体网关 下沉到边缘 ，大大降低了用户到第一跳接入服务的间隔，也能够更好施展 5G 边缘计算 的能力；
• 第三，音视频零碎的 管制面和媒体转发面做了从新的形象和隔离，音视频房间和流的治理由管制服务器负责，媒体和实时传输网零碎只负责流媒体数据的散发，具体这么做的目标和劣势，咱们在下文的核心技术局部再做开展。

新一代音视频 SDK 技术

对于新一代音视频 SDK 技术，咱们做了很清晰的分层设计，将各个模块做了尽可能的解耦，同时也让更多的根底模块能够下沉，让更多下层模块共用代码；在跨平台封装层形象各平台的差别，为 SDK 接口层提供对立调用逻辑。

在 SDK 接口封装层，咱们保持每个接口都要简略易用，同时接口之间要尽可能没有过强的先后顺序依赖，升高用户调用程序不统一导致的异样问题。接口设计的另一要点是：保障全端不论是 Android、iOS、PC 还是 Web，接口对立，多端能够无缝切换开发。网易云信为了让用户更好的应用 SDK，除了文档以外还推出了 易用体系 ，为开发者提供了 Sample Code、 行业解决方案 Demo 以及 通用的组件，这些都是源码级别的开源，为开发者提供优质的接入体验。

新一代音视频引擎

大家都晓得要有一个好的音视频体验，优良的音视频引擎是基石。所以云信在设计新一代音视频引擎时，也是从用户体验 QoE 指标为顶层指标，而后顺次向下拆解。

从 QoE 的角度，音频的指标有：是否有卡顿、回声和乐音，音质如何等；视频的指标包含：清晰度、晦涩度、色调和画面观感等；除此之外，端到端的时延和音画同步状况也是十分重要 QoE 指标。

要达到这些 QoE 的指标，引擎外围就很重要了，上图两头局部是云信的引擎核心层，蕴含了音频引擎、视频引擎、QoS 引擎：

• 音频引擎 ：最外围的算法是 3A 算法，云信为新一代 3A 算法做了大量的降级和优化工作。比方 AEC 除了在原有的线性滤波器和 NLP 上优化，还退出了自研的 双讲检测和 Noise Injection，多维度晋升 AEC 在更多场景下的性能。为了进一步晋升高音质的成果，咱们基于线上实在用户数据，打造了自动化的线上问题诊断剖析工具，并利用机型的云端适配和无参考打分体系，通过实在数据反馈一直打磨高音质的成果；
• 视频引擎 ： 云信自研的 NE264 和 NEVC 视频编码器 ，压缩成果和速度相比开源编码器有很大进步；同时云信实现了 高性能的 AI 超分计划，在视频后处理局部将低分辨率画面超分到 720P 乃至更高分辨率，大大晋升了上行带宽有余状况下的视频体验，云信的视频超分算法工程师做了大量的模型优化，让超分不再停留在实验室，并在新一代云信的音视频引擎中失去了广泛应用；
• QoS 引擎 ：为了在弱网下保障全链路的成果，QoS 引擎不仅在 Fec/Red/inBand-Fec 以及 ARQ 局部做了大量智能策略，在拥塞管制和带宽预计方面通过一直交融各类优良算法，比方 GCC、BBR、PCC 等， 自研了一套云信自有的拥塞控制算法，让云信的流控算法能够疾速匹配各类简单网络；

所有引擎外围算法都依赖于引擎平台根底能力。云信自研的 轻量级 AI 模型和高性能推理引擎，让各类 AI 算法在 RTC 高实时性场景实现落地，同时，数据采集与开掘以及标准化评估体系更让所有算法、策略有据可依，让算法与实际效果造成一个残缺闭环。咱们也会在文章的后半局部进行更深刻的介绍。

网易云信新一代音视频核心技术

看完架构降级，到了明天分享最外围的局部 ，我会别离从 新一代音视频交融通信服务端架构、大规模实时传输网、网络 QoS 引擎、视频引擎、音频引擎及全链路数据与品质通明 六个方面为大家深度分析云信新一代音视频架构的核心技术。

新一代音视频交融通信服务端架构

1 服务模块解耦

第一局部先讲音视频交融通信服务端架构。首先来看服务端架构中服务模块解耦的具体计划，也就是上文提到音视频零碎的管制面和媒体转发面解耦。客户端通过信令连贯连到边缘的媒体服务器上后，客户端音视频流的公布和订阅的信息都由边缘服务器同步给频道与流治理服务，所有频道业务层面对流的操作都由治理服务器对立解决。

这么做最大的益处就是边缘媒体服务器上没有简单的频道状态，在多台媒体服务器级联时，无需在媒体服务器之间同步房间以及流的状态和信息，大大降低了级联的难度并缩小了各级联的媒体服务器间因状态不同步导致的问题。通过这个计划，咱们就能够绝对容易的实现千人乃至万人大并发房间。

其次，边缘媒体服务器之间的级联采纳的是无向图构造，所有级联的媒体服务器节点都是平等的，没有顶点就不存在单点故障问题，也进步了整个零碎的可靠性。

最初，两台媒体服务器的级联，两头链路的路由优化由实时传输网来做，边缘媒体服务器自身并不关怀两头门路的布局问题，这么做也进一步解耦了媒体服务器与实时传输网零碎，实时传输网也无需关怀具体的音视频业务。

2 SFU 与 MCU 完满交融

新一代音视频交融通信服务端的另一个特点，是将 SFU 和 MCU 做了完满交融。大家应该都晓得 SFU 和 MCU 是什么，简略来讲，SFU 在服务器上是转发所有的流给上行的客户端，而 MCU 是把所有流在服务端混合后再上行。

SFU 和 MCU 各有优劣，SFU 服务端简略、客户端布局灵便，然而须要耗费更多流量，也对客户端性能提出更高的要求；MCU 则把编解码的性能转嫁到了服务器上，客户端布局绝对固定，但能够节约上行带宽，对客户端的性能开销更敌对。

在云信老一代架构中，咱们仅反对通过互动直播旁路服务器，将 MCU 流转推给交融 CDN，这样观众能通过播放器拉流来观看，但提早相比于 RTC 要高得多。

在新一代音视频服务器中，咱们将原有互动直播内的 MCU 能力抽离，做成一个通用 MCU 服务器，这样客户端就能够间接向边缘媒体服务器订阅 MCU 流，通过低提早的 RTC 通道实现 MCU 流的低提早观看，当然咱们也保留了互动直播旁路推交融 CDN 的通道。所有媒体服务器，包含通用 MCU、互动直播和交融 CDN 的调度，均由对立媒体调度服务负责。应用新一代音视频零碎用户能够依据本人的场景和实时性要求，灵便抉择两种计划。

新一代大规模实时传输网

云信自研的大规模分布式实时传输网作为云信新一代音视频架构服务端的外围局部，明天也是首次对外，咱们来具体看看几个局部的技术细节。

通过上图能够看到，两个边缘媒体服务器在须要级联的时候，会通过实时传输网的边缘接入节点将流量导入实时传输网。实时传输网的边缘节点依据实时传输网调度服务的对立调配，通过传输网的路由节点，将数据包以最优门路发送到目标边缘媒体服务器。在这个过程中，实时传输网路由探测和计算服务是链路路由抉择且保障最优质量的管制大脑。

这个大规模分布式实时传输网有四大特点：

• 低提早：边缘接入节点寰球笼罩，能够做到用户接入超低提早，品质能够媲美专线；
• 低成本：应用边缘计算能力，而不是外围 BGP 机房，在降低成本的同时也保障了品质；
• 高可达：实时传输网路由节点的门路布局十分智能，在寰球范畴内能做到多通道备份保证数据的高可达；
• 高牢靠：实时传输网反对分级服务，多个链路通道能够同时主动疾速切换，可能在秒级做到故障隔离，保障链路的稳固牢靠；

总结来说，云信自研的大规模分布式实时传输网，反对了大规模级联场景下的应用层组播技术，做到流量复用；同时还借鉴媒体服务器的分段 QoS 思路，反对分段重传和 FEC，保障了全链路的网络传输品质。

咱们认为做好实时传输网络，有几个必备条件：

• 节点笼罩 ： 寰球范畴内的节点笼罩，是做好实时传输网的根底，因而云信在国内次要省市以及海内各支流国家均部署了流媒体边缘服务器和实时传输网节点，来保障节点高笼罩；
• 网络数据量化指标 ：各个节点之间的网络状况是始终动态变化的，而 RTC 业务又是对网络变动特地敏感的，因而须要做好 节点间的网络数据量化指标，依据节点之间探测的丢包、时延、抖动信息给路由门路打分，评估优质传输率，将分数不优的门路动静剔除并做相应报警；
• QoE 用户体验 ：从客户端和边缘流媒体服务器上，采集用户通过实时传输网端到端的网络数据以及 QoE 数据，为每个实时传输网节点进行服务打分，周期性的进行节点间 A/B Test，以 赛马机制 最终留下真正能为用户提供优质 QoE 用户体验的节点；

图中就是云信实时传输网中局部节点门路的实时数据，因为节点较多，所以咱们次要依赖 哨兵报警零碎进行链路告警以及零碎的主动非优门路剔除性能，来保障实时传输网的主动运维。

新一代网络 QoS 引擎

要做好传输，仅有好的节点是不够的，咱们还要有好的 QoS 引擎。

1 全链路 QoS

做音视频或者做流媒体的同学对 QoS 应该是耳熟能详的。咱们次要通过以下六个方面开展详细分析。

• 抗弱网：云信的抗弱网能力始终放弃在业界一流程度，上下行能够反抗 70% 的丢包，像 FEC、RED 以及 HARQ 技术大家都很相熟，除此之外云信还 利用基于机器学习的 PLC 算法进一步提高音频丢包后的复原解决，并应用长参考帧 LTR 技术进一步升高视频的单帧失落后间断参考导致的卡顿；
• 去抖动：利用 Jitterbuffer 和 NetEQ 技术是十分成熟的计划，但在新一代 QoS 引擎中，咱们花了很多精力实现 Jitterbuffer 和 ARQ 以及音画同步模块的配合策略，在抗住 2000ms 抖动的同时，保障音画同步还是有不少工程方面的挑战；
• 智能流控 ：次要是带宽预计和拥塞判断，咱们在对 GCC、BBR 和 PCC 等算法进行深入研究的同时，交融各算法的劣势，自研了一套稳固牢靠的拥塞控制算法， 能够保障带宽利用率在限度网络下达到 90%+；同时，要做好流控必须做好全链路反馈和源侧响应，咱们利用 Simulcast 和 SVC 技术减少了调控的维度，并利用全链路 VQC 技术保障视频全链路的成果；
• 分段 QoS：云信在服务端分段 QoS 也做了很多实际。所谓分段 QoS，就是上行和上行的抗丢包要分段，带宽预计要分段，只有这样能力在服务端上针对每个用户的上行网络做最优的适配。分段 QoS 在多人视频会议场景是极其重要的技术手段 ，云信在服务端上智能预计每个上行用户的带宽，并综合利用 Simulcast 和 SVC 技术，为每个用户抉择最优的带宽调配策略，配合视频流的抉择策略以最优带宽利用率来匹配各用户的上行网络；除此之外， 接入路由优化是做好上行 QoS 的重点，云信也大量应用了大数据驱动的形式，一直为每个用户提供最优的接入边缘媒体服务器；
• 云端下发以及自适应配置：一套欠缺的云端下发与自适应参数配置服务是必不可少的，除了适配数千款各机型的参数，还须要做差异化场景的主动适配，各个客户端的差异化须要做好能力协商和能力降级，保障各个客户端都能有一个最优体验；
• A/B Test：最初咱们认为做 QoS 肯定要做 A/B Test，以赛马机制一直让 QoS 算法在线上用实在的用户网络来做数据采集，造成一个良性的闭环；

2 带宽预计和拥塞管制

在带宽预计方面，咱们交融 GCC、BBR 以及 PCC 的思维，做了很多算法和策略上的改良。在线视频会议的场景下，做到用户在入会 1 ~ 2 秒内实现带宽疾速探测 ，达到秒开秒清晰。在带宽无限的状况下， 带宽利用达到 90%+：

• 带宽突降时，带宽预计算法能够在 1~5 秒内实现探测和下调，最大水平防止了拥塞卡顿；
• 带宽突升时，咱们没有做的特地激进，大略也仅须要 5~10 秒，判断网络实在复原了当前，才会上探到安稳过程，最终达到 90%+ 的带宽利用；

个别的拥塞控制算法优化流程，都是以实验室环境为准，这个存在很大局限性。特地是实在中的网络环境非常复杂，容易受到 WIFI 信号、流量竞争等多种因素的影响。为了解决这个问题，云信设计了 一套基于大数据驱动的拥塞控制算法优化计划。咱们在线上全链路进行数据采集，并把采集到的数据进行特征提取，而后用这个特色在实验室内仿真线上网络环境，而后进行拥塞控制算法的调优和成果验证。最初通过 A/B Test，在线上验证算法优化前后的大数据比照进而继续对拥塞控制算法做优化，造成一种良性的闭环。

新一代视频引擎

聊完 QoS 引擎，咱们接着来看视频引擎。

1 自研视频编码器 NEVC

视频引擎中最外围就是视频编码技术 ，云信自研了 视频编码器 NEVC。

如上表，是咱们的实测后果：NEVC 与 X264 faster 档间接比照，速度相当，然而压缩率晋升了 30%。

与 x265 veryslow 档比照，压缩率相当，然而速度晋升了至多 50 倍以上，在某些 Case 下速度最快还能够达到 80 倍。

NEVC 是云信视频引擎的基石，在它的保驾护航下，终端的性能以及全链路的视频成果都有了极大的进步。

2 AI 屏幕共享

除了视频编码以外，云信还针对屏幕共享局部做了专项优化。接管侧在收到蕴含桌面共享的视频后，首先通过文字辨认找出文字区域，对文字区域进行 AI 深度学习优化，让文字更清晰，利用云信自研的轻量级深度模型，在异构减速的配合下，能够做到 1080p 实时优化，大大提高了云信在屏幕共享场景下的成果。

3 AI 超级分辨率

接着看云信自研的 AI 超级分辨率，其实超分这个话题这几年始终都很热门，然而真正将超分落地到 RTC 理论场景的却很少，次要的起因是要在挪动端上实现超分的低功耗和高实时性的难度较大。

云信基于 自研的轻量级网络，配合上异构的高性能推理引擎，能够做到超低功耗，让超分算法开销大大降低，从而在挪动端上真正落地。依赖云信 独有的数据集解决技术，在同样网络模型下超分成果更好，相比与其它的上采样插值算法，云信自研的 AI 超分的 PSNR 和 SSIM 得分都更高。云信将 AI 超分实在利用在线上场景，在上行弱网下调分辨率的状况下，在接收端利用 AI 超分晋升视频画面质量，让视频失去了显著的成果晋升。

上图为右边 360P 超分到 720P 实在测试成果，肉眼可见的，超分后清晰度的晋升是非常明显的。

新一代音频引擎

看完了视频引擎，接着咱们来看看云信新一代音视频中的音频引擎。

这是云信新一代音频引擎解决的流程图，这个图很简单，包含外面波及的技术点有很多，咱们开展剖析其中几个重要的技术点。

首先是 3A 算法，对于音频引擎来说，3A 算法永远都是重中之重。对回声打消来说，新一代音频引擎除了在原有的线性滤波器和 NLP 上的优化外，还退出了自研的双讲检测和 Noise Injection，进一步的晋升了 AEC 在更多场景下的成果。

对于降噪，咱们将降噪流程模块化后，在场景检测分类上是采纳了 AI 模型算法来做，别离训练了语音的 AI 模型和噪声的 AI 模型，让噪声辨认的性能大大提高，也让咱们基于 AI 的降噪算法相比于传统降噪成果有了显著的晋升。除了场景检测和降噪联合了 AI，咱们还有很多其余模块与 AI 进行了深刻的交融，而这些 AI 算法都是基于云信自研的轻量级网络模型和高性能推理引擎，算法性能大大提高。

音频算法另一个重要的点就是要做 机型适配，咱们依赖云信的大数据采集和无参考打分零碎，在云端做了大量的主动机型适配工作，大大提高了机型适配的效率以及笼罩。为了进一步量化语音的高音质，咱们制订了实验室规范评估体系，这个评估规范综合用了主观指标和主观的办法，通过这套评估体系，让咱们的音频算法优化和量化指标能够成为一个良性的闭环，一直打磨晋升云信的音频品质。

全链路数据与品质通明

最初一个和大家介绍的新一代音视频核心技术是数据与品质通明体系。大家都晓得当初是一个大数据时代，咱们认为做好大数据驱动对于音视频技术继续演进来说极其重要。所以，为了做好大数据驱动，咱们从 SDK、引擎、调度服务器、频道与流治理服务器、边缘媒体服务器、实时传输网，也就是音视频业务的 每一个环节都做了数据采集上报。

实时指标上报指将实时的状态进行上报，这里涵盖了 100+ 的要害事件，包含用户行为、各零碎行为、QoS 行为还有很多音视频 QoE 体验相干的要害事件，比方：分辨率切换、登录耗时、出图工夫等等；还上报了 300+ 的外围指标，这些指标包含：全链路的零碎运行时状态，QoS 指标，QoE 指标以及服务端状态。这些上报的数据都会经由咱们大数据平台进行解决，日均有百亿行的数据，有 T 级的存储。利用咱们的 高性能大数据平台，能够实现秒级实时处理这些数据。

有了这些数据后，咱们能够驱动很多事件，包含品质通明平台（对用户凋谢）、业务品质报表、产出接入调度优化、大网路由优化、QoS 算法优化、QoE 故障实时告警、各维度聚合品质剖析。云信新一代音视频，就是在源源不断的大数据驱动下，一直打磨，晋升本身的品质。

上图为云信对用户凋谢的品质通明平台，这个平台对各个指标做可视化展现，各个质保的含意清晰易懂，大大降低了用户问题排查难度，让用户对于全链路的品质都很明确。

除此之外，这些指标的形容咱们都尽可能 清晰易懂，全链路中的各个指标均清晰可见，不论是实时传输网、媒体边缘服务器以及媒体网关解决的实时成果在品质通明大盘上均有间接的图形展现。

网易云信新一代音视频场景化落地

分享了核心技术，最初一部分看一下理论的落地场景。即使有再好的技术，如果没方法落地是没有用的。所以咱们始终保持在理论的场景外面一直打磨具体的算法。

云音乐一起听 - 翻新音乐社交体验

这是网易云音乐一起听的场景，网易云音乐在往年七月份上线了“一起听”：你能够邀请你的好友一起听歌，同时能够进行实时音频互动，这是一个齐全翻新的音乐社交体验，云信新一代音视频的很多核心技术都在这个场景着落地：

• 首先，聊天场景下对提早要求是很高的，所以整体的 低提早、QoS 的能力 在这个场景外面失去了很明确的落地，包含能够明确晓得这个成果好还是不好；
• 其次，其对音质的要求很高，你听音乐必定不心愿语音成果是很差的，这是不能承受的。所以咱们的高音质能力，包含 AI 降噪能力 都在这个场景中失去了落地和实际；
• 最初是 机型适配，因为像网易云音乐的用户有很多，手机也是形形色色的，所以咱们须要做很好的机型适配，包含哪个机型没有回声，哪个机型的降噪是 OK 的。

通过这些外围能力，网易云信新一代音视频保障了网易云音乐一起听场景的稳固、牢靠和高质量。

云音乐 Look 直播 - 建设泛音乐娱乐状态

网易云音乐的 Look 直播，是主播之间直播连麦的场景。

• 云信新一代音视频的 RTC+Live 的交融通信能力 在这个场景落地；
• 同时，该场景对视频品质有较高的要求，新一代自研 高清视频编码和视频 AI 超分能力 也在这个场景失去充沛验证；

通过以上两个场景的落地，云信也建设了残缺的泛音乐娱乐生态。

配音秀 - 云信多人语音聊天室解决方案

配音秀是一款多人语聊配音类 App，是一个多人语音连麦互动直播的场景，这个场景绝对比较复杂，有以下几点值得关注：

• 云信为客户提供了易用体系中的多人语音聊天室解决方案，依赖于 SDK 的易用性，配音秀仅花一周的工夫就接入上线；
• 配音秀对音质要求也很高，所以新一代音视频的语音 AI 降噪 和智能回声打消 主播侧的 Noise Injection 能力就为配音提供了高质量的音频成果；
• QoS 抗弱网和去抖动能力，则保障了配音在 12 人同时上麦后的网络稳定性；

顺水寒云游戏 - 云信视频会议组件化

10 月 24 日，网易在顺水寒云游戏中举办了第二届国内分布式 AI 大会，每场会议 300 人参会，云信为顺水寒 提供了云游戏视频会议组件化的反对。

• 因为有寰球范畴内的 300 人参会，新一代音视频的高性能服务端 级联架构 、 寰球实时传输网 等能力在这个场景下失去了充沛验证；
• 因为视频会议参会者很多，须要为每个上行用户做最优的网络匹配，因而新一代音视频的 分段 QoS 能力 就十分重要；
• 另外参会者大量应用屏幕共享来做 PPT 演讲，所以 超高清 AI 屏幕共享 能力也施展了重大作用；

这次云信会议失去了海内外参会者的统一好评。其实，云信也提出了视频会议组件，这些组件帮忙用户实现视频会议场景的时候是十分易于实现的。我感觉这些内容都是云信在帮忙网易外部还是内部落地场景的时候做的思考和总结。

总结

以上就是明天分享的全部内容，做个简略的总结。

往年网易提出“从 0 到 1 是翻新，从 1 到 1.1 也是翻新“的价值观，网易云信音视频曾经走过 0 到 1，新一代音视频要做的就是从 1 到 1.1。咱们想要陪伴着客户一起成长，一直精密打磨各个垂直场景，在以后从红海中破浪前行。

在明天的分享中，我置信你曾经看到，网易云信曾经在音视频全链路各环节拥抱 AI 技术，因为咱们置信人工智能扭转现有技术体系，而我更深信技术是能够扭转世界，音视频畛域将来有有限可能！

谢谢大家！

分享嘉宾介绍

吴桐，2013 年浙大硕士毕业后退出网易，始终从事流媒体音视频相干的工作，现为网易云信流媒体首席架构师、多媒体开发专家，负责整体 RTC、直播、互动直播、传输大网及架构的设计和代码编写，从零开始参加打造云信的音视频技术。

更多音视频相干技术干货，欢送关注【网易智企技术 +】公众号。