在雷同流量耗费的状况下,540p可秒变1080p?这不是魔法,通过视频超分辨率技术(简称视频超分),就能让视频变得更清晰。
7月20日,在小红书最新版本7.48的App中,用户就能体验到这项技术带来的优质视频体验。小红书和华为HMS Core单干,在挪动端上线了基于HUAWEI HiAI Foundation提供的视频超分能力,实现了视频笔记在雷同流量耗费的状况下,540p清晰度可秒变1080p的视觉效果,让用户真正享受到低成本观看晦涩清晰视频的快感。
真挚分享发明用户价值,同频摸索低成本高画质
始终以来,小红书将用户基于实在生存的记录分享视为最贵重的财产,激励用户通过短视频、图文、直播等模式记录生存,分享生存形式,并基于趣味互动造成社区。以此为根底,小红书平台上涌现出内容与商业之间一直流转的良性交互,成长出独具特色的“种草经济”。
但在2K、4K屏幕分辨率已是支流的明天,用户对视频画质和体验成果的要求也越来越高,卡顿或视频分辨率太低都会让用户难以忍受。然而音视频畛域业务简单,端侧算力需要大、算法部署艰难,想要实现新的性能,构建新的业务场景并不容易。
如何为用户打造低成本高画质的视频播放体验,成为短视频畛域(尤其是各大头部短视频平台)迫切想要解决的问题。
与此同时,华为HMS Core通过对影像解决能力的一直积攒,联合多媒体技术和AI算法,为社交、影音行业的开发者提供了一套AI视频超分解决方案,轻松实现让用户观看低分辨率视频时也能享受高分辨率体验的成果。
对音视频畛域的统一摸索,为小红书与HMS Core的单干拉开了帷幕。
短视频超分加持,UGC种草刷到爽
致力于打造“超清视界”的AI视频超分技术,通过机器学习,能够将低分辨率的图像、视频进行重建,使图像、视频更加清晰。但传统超分算法对运算资源有较大的需要,且受限于挪动端算力、算法功耗、多机型兼容性等问题,在挪动端上部署实时超分技术面临着微小挑战。
在本次单干中,小红书App通过接入基于HMS Core凋谢的HUAWEI HiAI Foudation,使能端侧超分业务。端侧视频超分模型对实时性要求较高,意味着视频超分性能不仅须要高算力,还须要通过底层硬件能力优化来降低功耗。HUAWEI HiAI Foundation作为端侧AI计算的平台底座,通过多IP协同、图交融优化等技术,充分发挥NPU硬件单元的算力,令视频超分以更低功耗更高性能在手机端侧高效运行。
这样一来,小红书开发者们就可通过升高或升高用户所观看视频的清晰度和码率,动态化选择网络环境,无效升高了宽带的应用老本,并且晋升了开发与经营效率。同时,端侧视频超分的落地,也让小红书用户以雷同的流量耗费,取得了更晦涩清晰的“种草”视频观看体验。
高效单干,深度摸索将来音视频行业有限可能
小红书团队与华为HMS Core团队对接始于往年4月,单方单干高效,独特基于对媒体畛域的技术了解和计划,协同开发,很快便集成了HUAWEI HiAI Foundation并实现了端侧视频超分能力,通过AI硬件的减速,解决了功耗和性能的难题。小红书利用研发负责人邓林在提及与HMS Core单干感触时说到:“HMS Core帮忙咱们解决了端侧视频超分这一难题,这使得小红书的开发者们能够将更多精力放在业务翻新方面,用旗舰技术赋能晋升咱们的用户体验。”
目前,小红书“视频超分”性能部署至HUAWEI MateX2系列、P50 Pro、Mate 40系列等90多款华为NPU手机机型,以及HUAWEI MatePad系列等10多款华为NPU平板机型,在相干手机战争板刷小红书视频笔记都能取得优质体验。
音视频行业还存在着大量潜在的业务翻新需要,将来HMS Core和小红书也将继续摸索为用户提供更多个性化的服务,晋升用户体验,在静止类、赛事类等细分畛域上摸索更多翻新玩法。HUAWEI HiAI Foundation也始终在为开发者解决底层算力与体验中的切实问题和最新技术难点,对开发者凋谢底层算力平台,助力更多的算法迁徙到端侧部署。
理解更多详情>>
拜访华为开发者联盟官网
获取开发领导文档
华为挪动服务开源仓库地址:GitHub、Gitee
关注咱们,第一工夫理解 HMS Core 最新技术资讯~