简介： 这个夏天，没什么可能比一场酣畅淋漓的奥运较量来的过瘾。然而，在视频平台直播观看较量也有痛点：“卡顿”和“延时”。受限于不同地区、简单的网络状况、传输速度等起因，当您还在为赛点焦灼的时候，隔壁曾经传来欢呼声，观赛兴致霎时全无。为了打造更加晦涩稳固低延时的直播体验，越来越多企业关注低延时直播技术利用。
作者：予涛 途坦
阿里云低延时直播 RTS（Real-time Streaming）是在视频直播的根底上，进行全链路延时监控、CDN 传输协定革新、UDP 等底层技术优化，通过集成直播播放端 SDK，反对千万级并发场景下的节点间毫秒级延时直播能力，补救了传统直播 3~6 秒延时的问题，保障低延时、低卡顿、秒开晦涩的极致直播观看体验。
为了可能升高直播的端到端延时，2020 年阿里云正式推出寰球实时传输网络 GRTN (Global Real Time Network)，是部署在边缘云节点之上的超低延时、全分布式下沉的通信级流媒体传输网络，用于反对视频会议、视频直播、实时音视频等服务。要应用 GRTN 提供的短提早 / 实时传输服务，客户端能够通过浏览器的 webrtc 能力接入，也能够自行开发客户端协定栈来接入。
RTS NetSDK 是什么？
低延时直播 SDK 是由 RTS NetSDK、推流 SDK 和播放器 SDK 组成。其中，推流 SDK 将编码器输入的音视频帧发送给 RTS NetSDK，播放器 SDK 从 RTS NetSDK 以帧的模式读取音频 PCM 数据和视频 H264/H265 数据。
Example: ffmpeg 集成 RTS NetSDK 后拉 ARTC 流
RTS NetSDK 是基于 GRTN 开发运行在客户端的协定栈。RTS NetSDK 通过 UDP 传输层协定和 GRTN 上的 SFU 通信，收发音视频数据。思考网络条件未知性，RTS NetSDK 集成了 WebRTC 的 QoS 算法来适应网络变动，从而提供优质的音视频传输服务。RTS NetSDK 的轻量化设计使其非常容易被诸如 ffmpeg，obs 一类的开源框架所集成。
RTS 客户端形成
RTS NetSDK 承当推流拉流对接阿里云 RTS 服务桥梁，以包体积小、集成简略、对现有业务没有入侵为次要特点，帮忙直播客户简略疾速的降级传统直播到阿里云 RTS 直播。
RTS NetSDK 反对多平台，Android/iOS/MacOS/linux/Windows/RTOS，反对多个开源我的项目集成的接入代码，ijkPlayer、obs、FFmpeg，而且阿里云推流 SDK 和播放器 SDK 曾经内置了 RTS 直播推拉流能力。
RTMP 是基于 TCP 传输的，RTS 是基于 UDP 传输的。在网络稳固带宽足够条件下，RTS 比照 rtmp 没有多少劣势，但这种现实状况是比拟难以保障的。传输协定上的差别，使得 RTMP 对于变动的网络没有太多的 QoS 伎俩，齐全依赖 TCP 的拥塞管制。这种拥塞管制不以低提早为指标。阿里云的 RTS 引入 WebRTC 的 QoS 技术，对于网络丢包有更好的容忍度。杰出的带宽预计和拥塞管制，提供了细腻的网络应用策略。
另外，在 Adobe Flash Player 进行更新，RTMP 在网页上曾经无奈再应用。客户要么抉择提早十分大的 HLS 技术，或抉择 WebRTC 技术。RTS H5 版本实质上是 WebRTC，能够在网页上运行。
产品劣势
低提早
| 散发计划 | 特点 | 提早 |
|---|---|---|
| HLS | 反对宽泛，类文件减速，散发技术比拟成熟 | 个别 10s 以上 |
| RTMP | 多用于推流，国内遍地开花。用于客户端散发并不是支流 | 个别 5s 以上 |
| FLV | 多用于客户端散发，为目前国内支流计划 | 个别 5s 以上 |
| 阿里云 RTS 直播 | 应用 udp 传输技术 | 500ms 左右（基于实验室数据） |
HLS 直播因为其 TS 文件切片 – 整片读取的机制，其提早至多都在一个 gop 以上。
RTMP、FLV 直播，为了保障客户端的播放顺畅，往往会让客户端放弃 5 秒以上的缓存。
阿里云 RTS 直播，基于 udp 传输技术，全链路针对提早优化，最新 v1.8.0 版本曾经能够将提早升高到 500 毫秒左右。
抗弱网
阿里云 RTS 直播是基于 UDP 传输的，通过利用 WebRTC 的先进技术（比方 BWE、jitter buffer、NetEQ、FEC、NACK 等 QoS 机制）以及自研的抗弱网技术，在简单易变的用户网络环境中，比基于 TCP 传输的直播有着更好的晦涩度和提早。
包体积小
RTS NetSDK 领有笨重的包体积，以最新版本 Android 和 iOS 为例：
| 平台 | 增量大小 |
|---|---|
| iOS | 755 KB（arm64） |
| Android | 0.9MB（arm64） |
易集成
直播客户大多都曾经有了成型的直播推流和直播拉流能力。RTS NetSDK 以库的模式被集成进客户现有的 SDK，实现低成本降级，且兼容之前的业务逻辑。阿里云 RTS 直播曾经反对到传统直播的根本所有个性。
| 能力类型 | RTS 直播反对状况 |
|---|---|
| 视频编码 | h264、h265 |
| 音频编码 | aac、opus、g722 |
| 音频采样率 | 44100、48k、16000 (g722) |
| 视频 SEI | 反对 |
| 公有 NAL 拓展 | 即使和 rtp 定义类型抵触，也做到了反对 |
| rtmp 推流 artc 拉流 | 反对 |
| artc 推流 rtmp/hls 拉流 | 反对 |
| artc 推流 artc 拉流 | 反对 |
| 加密 | 阿里云 KMS 加密体系 |
产品利用架构
RTS 直播将反对传统直播的根本全副能力，如直播录制、防盗链、导播台等。
RTS NetSDK 能够被集成进拉流侧的各种产品中去。另外提供了集成到 ffplay、ijkPlayer 的源码，客户能够间接应用或者参照着批改。阿里云播放器 SDK 曾经内置了 RTS NetSDK 的拉流能力。
RTS NetSDK 也能够被集成进端侧的产品中去，RTS NetSDK 赋予推流产品 RTS 直播的能力，同时也提供了集成到 ffmpeg、obs 的源码。阿里云推流 SDK 曾经内置了 RTS NetSDK 推流能力。
RTS NetSDK 是将来直播和通信一体化 SDK 的基石。在 RTS NetSDK 之上，加一个 Multimedia Framework，以及 QoS 音讯解决，就能够形成一个一体化 SDK。这对于曾经有本人的 Framework 的客户来说是个好消息，不须要为直播和通信别离开发软件了，同时也简化了直播连麦场景的实现。
「视频云技术」你最值得关注的音视频技术公众号，每周推送来自阿里云一线的实际技术文章，在这里与音视频畛域一流工程师交换切磋。公众号后盾回复【技术】可退出阿里云视频云产品技术交换群，和业内大咖一起探讨音视频技术，获取更多行业最新信息。
版权申明： 本文内容由阿里云实名注册用户自发奉献，版权归原作者所有，阿里云开发者社区不领有其著作权，亦不承当相应法律责任。具体规定请查看《阿里云开发者社区用户服务协定》和《阿里云开发者社区知识产权爱护指引》。如果您发现本社区中有涉嫌剽窃的内容，填写侵权投诉表单进行举报，一经查实，本社区将立即删除涉嫌侵权内容。