在雷同流量耗费的状况下,540p 可秒变 1080p?这不是魔法, 通过视频超分辨率技术(简称视频超分),就能让视频变得更清晰 。
7 月 20 日,在小红书最新版本 7.48 的 App 中,用户就能体验到这项技术带来的优质视频体验。小红书和华为 HMS Core 单干,在挪动端上线了基于 HUAWEI HiAI Foundation 提供的视频超分能力,实现了视频笔记在雷同流量耗费的状况下,540p 清晰度可秒变 1080p 的视觉效果,让用户真正享受到低成本观看晦涩清晰视频的快感。
真挚分享发明用户价值,同频摸索低成本高画质
始终以来,小红书将用户基于实在生存的记录分享视为最贵重的财产,激励用户通过短视频、图文、直播等模式记录生存,分享生存形式,并基于趣味互动造成社区。以此为根底,小红书平台上涌现出内容与商业之间一直流转的良性交互,成长出独具特色的“种草经济”。
但在 2K、4K 屏幕分辨率已是支流的明天,用户对视频画质和体验成果的要求也越来越高,卡顿或视频分辨率太低都会让用户难以忍受。然而音视频畛域业务简单,端侧算力需要大、算法部署艰难,想要实现新的性能,构建新的业务场景并不容易。
如何为用户打造低成本高画质的视频播放体验,成为短视频畛域(尤其是各大头部短视频平台)迫切想要解决的问题。
与此同时,华为 HMS Core 通过对影像解决能力的一直积攒,联合多媒体技术和 AI 算法,为社交、影音行业的开发者提供了一套 AI 视频超分解决方案,轻松实现让用户观看低分辨率视频时也能享受高分辨率体验的成果。
对音视频畛域的统一摸索,为小红书与 HMS Core 的单干拉开了帷幕。
短视频超分加持,UGC 种草刷到爽
致力于打造“超清视界”的 AI 视频超分技术,通过机器学习,能够将低分辨率的图像、视频进行重建,使图像、视频更加清晰。但传统超分算法对运算资源有较大的需要,且受限于挪动端算力、算法功耗、多机型兼容性等问题,在挪动端上部署实时超分技术面临着微小挑战。
在本次单干中,小红书 App 通过接入基于 HMS Core 凋谢的 HUAWEI HiAI Foudation,使能端侧超分业务。端侧视频超分模型对实时性要求较高,意味着视频超分性能不仅须要高算力,还须要通过底层硬件能力优化来降低功耗。HUAWEI HiAI Foundation 作为端侧 AI 计算的平台底座,通过多 IP 协同、图交融优化等技术,充分发挥 NPU 硬件单元的算力,令视频超分以更低功耗更高性能在手机端侧高效运行。
这样一来,小红书开发者们就可通过升高或升高用户所观看视频的清晰度和码率,动态化选择网络环境,无效升高了宽带的应用老本,并且晋升了开发与经营效率。同时,端侧视频超分的落地,也让小红书用户以雷同的流量耗费,取得了更晦涩清晰的“种草”视频观看体验。
高效单干,深度摸索将来音视频行业有限可能
小红书团队与华为 HMS Core 团队对接始于往年 4 月,单方单干高效,独特基于对媒体畛域的技术了解和计划,协同开发,很快便集成了 HUAWEI HiAI Foundation 并实现了端侧视频超分能力,通过 AI 硬件的减速,解决了功耗和性能的难题。小红书利用研发负责人邓林在提及与 HMS Core 单干感触时说到:“HMS Core 帮忙咱们解决了端侧视频超分这一难题,这使得小红书的开发者们能够将更多精力放在业务翻新方面,用旗舰技术赋能晋升咱们的用户体验。”
目前,小红书“视频超分”性能部署至 HUAWEI MateX2 系列、P50 Pro、Mate 40 系列等 90 多款华为 NPU 手机机型,以及 HUAWEI MatePad 系列等 10 多款华为 NPU 平板机型,在相干手机战争板刷小红书视频笔记都能取得优质体验。
音视频行业还存在着大量潜在的业务翻新需要,将来 HMS Core 和小红书也将继续摸索为用户提供更多个性化的服务,晋升用户体验,在静止类、赛事类等细分畛域上摸索更多翻新玩法。HUAWEI HiAI Foundation 也始终在为开发者解决底层算力与体验中的切实问题和最新技术难点,对开发者凋谢底层算力平台,助力更多的算法迁徙到端侧部署。
理解更多详情 >>
拜访华为开发者联盟官网
获取开发领导文档
华为挪动服务开源仓库地址:GitHub、Gitee
关注咱们,第一工夫理解 HMS Core 最新技术资讯~