在相同流量消耗的情况下,540p可秒变1080p?这不是魔法,通过视频超分辨率技术(简称视频超分),就能让视频变得更清晰

7月20日,在小红书最新版本7.48的App中,用户就能体验到这项技术带来的优质视频体验。小红书和华为HMS Core合作,在移动端上线了基于HUAWEI HiAI Foundation提供的视频超分能力,实现了视频笔记在相同流量消耗的情况下,540p清晰度可秒变1080p的视觉效果,让用户真正享受到低成本观看流畅清晰视频的快感。

真诚分享创造用户价值,同频探索低成本高画质

一直以来,小红书将用户基于真实生活的记录分享视为最宝贵的财富,鼓励用户通过短视频、图文、直播等形式记录生活,分享生活方式,并基于兴趣互动形成社区。以此为基础,小红书平台上涌现出内容与商业之间不断流转的良性交互,成长出独具特色的“种草经济”。

但在2K、4K屏幕分辨率已是主流的今天,用户对视频画质和体验效果的要求也越来越高,卡顿或视频分辨率太低都会让用户难以忍受。然而音视频领域业务复杂,端侧算力需求大、算法部署困难,想要实现新的功能,构建新的业务场景并不容易。

如何为用户打造低成本高画质的视频播放体验,成为短视频领域(尤其是各大头部短视频平台)迫切想要解决的问题。

与此同时,华为HMS Core通过对影像处理能力的不断积累,结合多媒体技术和AI算法,为社交、影音行业的开发者提供了一套AI视频超分解决方案,轻松实现让用户观看低分辨率视频时也能享受高分辨率体验的效果。

** 对音视频领域的一致探索,为小红书与HMS Core的合作拉开了帷幕。**

短视频超分加持,UGC种草刷到爽

致力于打造“超清视界”的AI视频超分技术,通过机器学习,可以将低分辨率的图像、视频进行重建,使图像、视频更加清晰。但传统超分算法对运算资源有较大的需求,且受限于移动端算力、算法功耗、多机型兼容性等问题,在移动端上部署实时超分技术面临着巨大挑战。

在本次合作中,小红书App通过接入基于HMS Core开放的HUAWEI HiAI Foudation,使能端侧超分业务。端侧视频超分模型对实时性要求较高,意味着视频超分功能不仅需要高算力,还需要通过底层硬件能力优化来降低功耗。HUAWEI HiAI Foundation作为端侧AI计算的平台底座,通过多IP协同、图融合优化等技术,充分发挥NPU硬件单元的算力,令视频超分以更低功耗更高性能在手机端侧高效运转。

这样一来,小红书开发者们就可通过降低或升高用户所观看视频的清晰度和码率,动态化选择网络环境,有效降低了宽带的使用成本,并且提升了开发与运营效率。同时,端侧视频超分的落地,也让小红书用户以相同的流量消耗,获得了更流畅清晰的“种草”视频观看体验。

高效合作,深度探索未来音视频行业无限可能

小红书团队与华为HMS Core团队对接始于今年4月,双方合作高效,共同基于对媒体领域的技术理解和方案,协同开发,很快便集成了HUAWEI HiAI Foundation并实现了端侧视频超分能力,通过AI硬件的加速,解决了功耗和性能的难题。小红书应用研发负责人邓林在提及与HMS Core合作感受时说到:“HMS Core帮助我们解决了端侧视频超分这一难题,这使得小红书的开发者们可以将更多精力放在业务创新方面,用旗舰技术赋能提升我们的用户体验。”

目前,小红书“视频超分”功能部署至HUAWEI MateX2系列、P50 Pro、Mate 40系列等90多款华为NPU手机机型,以及HUAWEI MatePad系列等10多款华为NPU平板机型,在相关手机和平板刷小红书视频笔记都能获得优质体验。

音视频行业还存在着大量潜在的业务创新需求,未来HMS Core和小红书也将持续探索为用户提供更多个性化的服务,提升用户体验,在运动类、赛事类等细分领域上探索更多创新玩法。HUAWEI HiAI Foundation也一直在为开发者解决底层算力与体验中的切实问题和最新技术难点,对开发者开放底层算力平台,助力更多的算法迁移到端侧部署。

了解更多详情>>

访问华为开发者联盟官网

获取开发指导文档

华为移动服务开源仓库地址:GitHubGitee

关注我们,第一时间了解 HMS Core 最新技术资讯~

小红书携手HMS Core,畅玩高清视界,种草美好生活的更多相关文章

  1. HMS Core积极探索基于硬件耳返的功能,帮助唱吧整体唱歌延迟率降低60%

    唱吧的使命是让唱歌更简单.让生活更美好,其布局的K歌业务专注于让曲库更全.音质更好,开创了同框合唱.弹唱等有意思的游戏类K歌玩法.为了让用户拥有更加沉浸的娱乐体验,唱吧与HMS Core积极探索基于硬 ...

  2. HMS Core 能力速配,唱响恋爱进行曲

    情人节,HMS Core 最具CP感的能力搭档来袭,浓浓爱意,表白各行业,你准备好了吗? 1.ML Kit +Signpal Kit 科技相助,恋爱提速.展现爱意的方式有千百种,你可以用文本翻译学习数 ...

  3. HMS Core Keyring携手航班管家和高铁管家,打造美好出行体验

    高铁管家是国内最早⽀持⼿机⽀付购买⽕⻋票App之⼀,日活用户超380万,为⽤户提供一站式铁路出⾏服务.高铁管家母公司--深圳市活⼒天汇科技股份有限公司是国内智能⼤出⾏的开创者,先后推出航班管家.⾼铁管 ...

  4. HMS Core Discovery第16期回顾|与虎墩一起,玩转AI新“声”态

    HMS Core 在AI领域最新的技术能力有哪些?本期Discovery直播以<与虎墩一起,玩转AI新"声"态>为主题,邀请了HMS Core 机器学习服务产品经理.机 ...

  5. 华为HMS Core携手超图为三维GIS注入新动能

    6月30日,在2022(第五届)GIS软件技术大会GIS基础软件新技术板块论坛上,华为联合超图推出了基于HMS Core 3D Engine开发的高保真三维GIS插件,通过3D渲染技术助力三维GIS实 ...

  6. 华为HMS Core图形引擎服务携手三七游戏打造移动端实时DDGI技术

    在2021年HDC大会的主题演讲中提到,华为HMS Core图形引擎服务(Scene Kit)正协同三七游戏一起打造实时DDGI(动态漫反射全局光照:Dynamic Diffuse Global Il ...

  7. HMS Core携手厦门大学打造AR增强现实技术

    HMS Core AR Engine团队联手厦门大学信息学院,与专业学生面对面深度交流行业发展与前沿成果.双方共同编写行业知识教材,引导学生开发AR游戏实践,为未来AR.VR人才培养培育可复制的教学模 ...

  8. HMS Core电商与游戏行业解决方案,全流程赋能开发者创新

    2021年12月29日,"华为云&华为终端云服务创新峰会2022"在北京柏悦酒店成功举办.华为HMS Core电商与游戏行业解决方案亮相本次峰会的线下展区,为行业开发者们解 ...

  9. 华为开发者大会HDC2022:HMS Core 持续创新,与开发者共创美好数智生活

    11月4日,华为开发者大会HDC2022在东莞松山湖拉开帷幕.HMS Core在本次大会上带来了包括音频编辑服务的高拟真歌声合成技术.视频编辑服务的智能提取精彩瞬间功能.3D Engine超大规模数字 ...

随机推荐

  1. 【转】WinForm窗体刻度尺

    `using System; using System.Drawing; using System.Windows.Forms; using System.Drawing.Drawing2D; nam ...

  2. 再见 FTP/SFTP!是时候拥抱下一代文件传输利器了!

    关注「开源Linux」,选择"设为星标" 回复「学习」,有我为您特别筛选的学习资料~ 两台电脑之间该如何传送档案,其实方法有超多种的,像是 FTP 或透过 SSH 方式来传送档案, ...

  3. 没错,华为开始对IoT下手了!

    最近,有很多粉丝在后台私信 想知道目前最热的技术是什么? 小编觉得,5G时代到来 物联网技术将迎来快速的发展 加上目前,国内物联网人才短缺 每年人才缺口达百万 IoT物联网将成为最热门的技术 最近,小 ...

  4. 更换国内镜像源进行pip安装

    Linux中当我们需要安装某个模块时(比如tensorflow2.0.0),常见有三种方法: pip install tensorflow==2.0.0 pip install https://pyp ...

  5. 一起看 I/O | Flutter 3 正式发布!

    作者 / Tim Sneath, Google Flutter 和 Dart 产品组产品经理 Flutter 3 实现了 Flutter 以移动端为中心扩展到多平台的产品规划,并在今年 I/O 大会的 ...

  6. 3.Docker常用命令

    帮助启动类命令 启动docker: systemctl start docker 停止docker: systemctl stop docker 重启docker: systemctl restart ...

  7. iOS全埋点解决方案-时间相关

    前言 ​ 我们使用"事件模型( Event 模型)"来描述用户的各种行为,事件模型包括事件( Event )和用户( User )两个核心实体.我们在描述用户行为时,往往只需要描述 ...

  8. mapstruct 的 mapstruct-processor 自动生成的 Impl 文件中未设置属性值(时好时坏)

    配置依赖和注解处理器 ... <properties> <org.mapstruct.version>1.4.2.Final</org.mapstruct.version ...

  9. 好客租房21-react组件的两种创建方式(函数组件)

    1使用函数创建组件 函数组件:使用js的函数或者箭头函数创建的组件 约定1:函数组件名称必须以 开头 约定2:函数组件必须有返回值 表示该组件的结构 如果返回值为null 表示不渲染任何内容 2.1使 ...

  10. C# 与LINQ有关的语言特性

    1.隐式类型 我们知道强类型语言 C  C++ C#  Java 对变量的定义前必须要确定这个变量是什么类型的   例如  string str="abc";    int num ...