关于音视频:活动回顾-基于英特尔技术的端到端音视频优化

0次阅读

共计 1833 个字符,预计需要花费 5 分钟才能阅读完成。

导读:2022 年 8 月 18 日,“视界无垠,音聚而生”,2022 网易音视频技术大会胜利举办,本次大会邀请了来自网易智企、网易云音乐、网易伏羲、网易新闻和英特尔的产品与技术专家进行专题分享。本文是来自英特尔的技术专家张立宇分享的《基于英特尔技术的端到端音视频优化》。

嘉宾介绍: 张立宇,英特尔互联网行业解决方案专家,长期从事音视频等基础架构建设工作,包含视频编码,视频剖析,性能优化等方向。


随着直播技术的优化和降级,视频互动、视频晦涩曾经成为了标配。在这一过程中,传统以文本、图片等为主的互联网信息流也逐步被以音视频为代表的多媒体流所取代。以目前炽热的短视频服务为例,至 2021 年末,互联网用户对短视频服务的粘性已成为各互联网服务之首,应用总时长达 25.7%。对于大多数的超清音视频直播或录播,如何进行优化,提供给用户更好的视听体验,是一个很大的课题。

30 多年的互联网倒退给中国带来天翻地覆的变动,成为推动中国经济倒退的重要能源。数字经济继续疾速地增长,信息技术与实体经济减速交融,数字经济成为了中国经济增长的新引擎。

在这过程中音视频的利用越来越宽泛,视觉化的信息代替了传统的文字、图片、符号等,更加直观地反映出信息的实质,促成了更间接的信息交换。依据具体数据显示,到 2022 年,中国的超高清的视频市场规模会冲破 4 万亿。

总体来讲,在新技术的倒退下,音视频技术须要一直地降级来反对新的利用场景、新的模式、新的利用的需要。所以目前对整个音视频畛域来讲,不仅须要对下层软件系统进行优化,也须要在底层硬件技术设施上寻找新的解决方案,这样能力在音视频这个畛域有一个真正意义上的颠覆性的翻新技术升级。

大规模的人工智能的部署,也对将来图形处理产品提出了要求,要求实现高度的视觉保障,继续优化人工智能和间断计算,也为云时代的数据中心带来了强劲的须要,须要咱们有新的架构、实现智能计算、对海量数据进行解决、易构算力的交融与减速、多负载运维的撑持等。英特尔目前曾经建设了软件减速零碎、GPU 路线图,横跨从客户端到数据中心的所有产品,帮忙客户应答数据时代不同的需要。从英特尔的角度来讲,首先是通过硬件能力来构建音视频基础架构。英特尔始终在致力为开发人员提供硬件架构和软件的正确的组合,以便为他们提供特定的最佳解决方案。英特尔的 XPU 策略不是一个新的处理器或者产品,而是一个架构的组合,包含 CPU、GPU、FPGA、ASIC 等不同的减速和解决芯片,对应满足不同的利用负载和功耗需要。

英特尔对语音和视频解决的优化计划能够分为两层,底层基础架构对整个云平台视频云提供撑持,其次对下层视频云的具体工作负载进行优化。在硬件基础设施上,英特尔通过英特尔® 至强® 可扩大处理器、英特尔® FPGA 产品、英特尔® 傲腾™ 长久内存,以及英特尔® 以太网网络适配器、英特尔® 视觉云媒体剖析加速卡等产品,为各类基于音视频能力的翻新计划提供强劲的计算、存储和网络解决能力;另一方面,在软件优化减速上,来自英特尔的 Media SDK、SVT、英特尔® oneAPI 等,在不同利用场景中以残缺的软件栈来减速音视频能力的工作效力。

除此之外,英特尔也有很多集成的数据函数库,提供了十分多的性能优化,比如说英特尔的 IPP,可能在一个函数的第二个过程中,疾速地实现离散的余弦变换,在晋升运算的同时,极大精简了代码量,通过应用 IPP 的函数库,优化算法,最小化内存的占用,加上英特尔 AVX512 指令集等形式,能够在离散余弦变换计算时实现 3 倍性能的晋升。

总体来说,英特尔的硬件技术设施就像性能加速器,通过英特尔至强处理器、英特尔的 FPGA 产品、英特尔的傲腾内存等硬件产品组合,为各类基于音视频的翻新计划提供十分强劲的技术能力、存储能力、网络能力。而软件更像是系统优化器,在不同的利用场景中以残缺的软件栈来减速音视频能力的工作性能,软硬联合之下英特尔就能够为各类平台提供基于云或数据中心的音视频的解决能力,提供业余高效的编码、解码能力,帮忙云服务提供商用户带来更加便捷、更加高清、价格更加实惠的视听体验,同时使云厂商更无效的推动系统优化,升高经营老本,最终实现 1+1 大于 2 的协同效应。

对英特尔来说,将来的数据中心,将会实现计算和存储的物理拆散,实现平安个性在芯片外部架构的整合,实现更灵便的硬件,软件应用好服务,软件将会以微服务的模式出现,通过以无处不在的连贯,从云到边缘的基础设施以及人工智能,帮忙人类持续增长,不断创新,全面赋能万物智能化的改革。

正文完
 0