在相同流量消耗的情况下,540p可秒变1080p?这不是魔法,通过视频超分辨率技术(简称视频超分),就能让视频变得更清晰

7月20日,在小红书最新版本7.48的App中,用户就能体验到这项技术带来的优质视频体验。小红书和华为HMS Core合作,在移动端上线了基于HUAWEI HiAI Foundation提供的视频超分能力,实现了视频笔记在相同流量消耗的情况下,540p清晰度可秒变1080p的视觉效果,让用户真正享受到低成本观看流畅清晰视频的快感。

真诚分享创造用户价值,同频探索低成本高画质

一直以来,小红书将用户基于真实生活的记录分享视为最宝贵的财富,鼓励用户通过短视频、图文、直播等形式记录生活,分享生活方式,并基于兴趣互动形成社区。以此为基础,小红书平台上涌现出内容与商业之间不断流转的良性交互,成长出独具特色的“种草经济”。

但在2K、4K屏幕分辨率已是主流的今天,用户对视频画质和体验效果的要求也越来越高,卡顿或视频分辨率太低都会让用户难以忍受。然而音视频领域业务复杂,端侧算力需求大、算法部署困难,想要实现新的功能,构建新的业务场景并不容易。

如何为用户打造低成本高画质的视频播放体验,成为短视频领域(尤其是各大头部短视频平台)迫切想要解决的问题。

与此同时,华为HMS Core通过对影像处理能力的不断积累,结合多媒体技术和AI算法,为社交、影音行业的开发者提供了一套AI视频超分解决方案,轻松实现让用户观看低分辨率视频时也能享受高分辨率体验的效果。

** 对音视频领域的一致探索,为小红书与HMS Core的合作拉开了帷幕。**

短视频超分加持,UGC种草刷到爽

致力于打造“超清视界”的AI视频超分技术,通过机器学习,可以将低分辨率的图像、视频进行重建,使图像、视频更加清晰。但传统超分算法对运算资源有较大的需求,且受限于移动端算力、算法功耗、多机型兼容性等问题,在移动端上部署实时超分技术面临着巨大挑战。

在本次合作中,小红书App通过接入基于HMS Core开放的HUAWEI HiAI Foudation,使能端侧超分业务。端侧视频超分模型对实时性要求较高,意味着视频超分功能不仅需要高算力,还需要通过底层硬件能力优化来降低功耗。HUAWEI HiAI Foundation作为端侧AI计算的平台底座,通过多IP协同、图融合优化等技术,充分发挥NPU硬件单元的算力,令视频超分以更低功耗更高性能在手机端侧高效运转。

这样一来,小红书开发者们就可通过降低或升高用户所观看视频的清晰度和码率,动态化选择网络环境,有效降低了宽带的使用成本,并且提升了开发与运营效率。同时,端侧视频超分的落地,也让小红书用户以相同的流量消耗,获得了更流畅清晰的“种草”视频观看体验。

高效合作,深度探索未来音视频行业无限可能

小红书团队与华为HMS Core团队对接始于今年4月,双方合作高效,共同基于对媒体领域的技术理解和方案,协同开发,很快便集成了HUAWEI HiAI Foundation并实现了端侧视频超分能力,通过AI硬件的加速,解决了功耗和性能的难题。小红书应用研发负责人邓林在提及与HMS Core合作感受时说到:“HMS Core帮助我们解决了端侧视频超分这一难题,这使得小红书的开发者们可以将更多精力放在业务创新方面,用旗舰技术赋能提升我们的用户体验。”

目前,小红书“视频超分”功能部署至HUAWEI MateX2系列、P50 Pro、Mate 40系列等90多款华为NPU手机机型,以及HUAWEI MatePad系列等10多款华为NPU平板机型,在相关手机和平板刷小红书视频笔记都能获得优质体验。

音视频行业还存在着大量潜在的业务创新需求,未来HMS Core和小红书也将持续探索为用户提供更多个性化的服务,提升用户体验,在运动类、赛事类等细分领域上探索更多创新玩法。HUAWEI HiAI Foundation也一直在为开发者解决底层算力与体验中的切实问题和最新技术难点,对开发者开放底层算力平台,助力更多的算法迁移到端侧部署。

了解更多详情>>

访问华为开发者联盟官网

获取开发指导文档

华为移动服务开源仓库地址:GitHubGitee

关注我们,第一时间了解 HMS Core 最新技术资讯~

小红书携手HMS Core,畅玩高清视界,种草美好生活的更多相关文章

  1. HMS Core积极探索基于硬件耳返的功能,帮助唱吧整体唱歌延迟率降低60%

    唱吧的使命是让唱歌更简单.让生活更美好,其布局的K歌业务专注于让曲库更全.音质更好,开创了同框合唱.弹唱等有意思的游戏类K歌玩法.为了让用户拥有更加沉浸的娱乐体验,唱吧与HMS Core积极探索基于硬 ...

  2. HMS Core 能力速配,唱响恋爱进行曲

    情人节,HMS Core 最具CP感的能力搭档来袭,浓浓爱意,表白各行业,你准备好了吗? 1.ML Kit +Signpal Kit 科技相助,恋爱提速.展现爱意的方式有千百种,你可以用文本翻译学习数 ...

  3. HMS Core Keyring携手航班管家和高铁管家,打造美好出行体验

    高铁管家是国内最早⽀持⼿机⽀付购买⽕⻋票App之⼀,日活用户超380万,为⽤户提供一站式铁路出⾏服务.高铁管家母公司--深圳市活⼒天汇科技股份有限公司是国内智能⼤出⾏的开创者,先后推出航班管家.⾼铁管 ...

  4. HMS Core Discovery第16期回顾|与虎墩一起,玩转AI新“声”态

    HMS Core 在AI领域最新的技术能力有哪些?本期Discovery直播以<与虎墩一起,玩转AI新"声"态>为主题,邀请了HMS Core 机器学习服务产品经理.机 ...

  5. 华为HMS Core携手超图为三维GIS注入新动能

    6月30日,在2022(第五届)GIS软件技术大会GIS基础软件新技术板块论坛上,华为联合超图推出了基于HMS Core 3D Engine开发的高保真三维GIS插件,通过3D渲染技术助力三维GIS实 ...

  6. 华为HMS Core图形引擎服务携手三七游戏打造移动端实时DDGI技术

    在2021年HDC大会的主题演讲中提到,华为HMS Core图形引擎服务(Scene Kit)正协同三七游戏一起打造实时DDGI(动态漫反射全局光照:Dynamic Diffuse Global Il ...

  7. HMS Core携手厦门大学打造AR增强现实技术

    HMS Core AR Engine团队联手厦门大学信息学院,与专业学生面对面深度交流行业发展与前沿成果.双方共同编写行业知识教材,引导学生开发AR游戏实践,为未来AR.VR人才培养培育可复制的教学模 ...

  8. HMS Core电商与游戏行业解决方案,全流程赋能开发者创新

    2021年12月29日,"华为云&华为终端云服务创新峰会2022"在北京柏悦酒店成功举办.华为HMS Core电商与游戏行业解决方案亮相本次峰会的线下展区,为行业开发者们解 ...

  9. 华为开发者大会HDC2022:HMS Core 持续创新,与开发者共创美好数智生活

    11月4日,华为开发者大会HDC2022在东莞松山湖拉开帷幕.HMS Core在本次大会上带来了包括音频编辑服务的高拟真歌声合成技术.视频编辑服务的智能提取精彩瞬间功能.3D Engine超大规模数字 ...

随机推荐

  1. SSH 证书登录教程

    开源Linux 专注分享开源技术知识 SSH 是服务器登录工具,提供密码登录和密钥登录. 但是,SSH 还有第三种登录方法,那就是证书登录.很多情况下,它是更合理.更安全的登录方法,本文就介绍这种登录 ...

  2. 3D离线地图开发

    3D离线地图介绍(3D离线采用矢量数据作为地图基础,可保持地图数据最新) 一.开发中引用3D离线地图(可独立部署通过内外IP+端口进行访问,也可拷贝js库文件到项目中通过绝对路径访问) 1).离线AP ...

  3. python DOS 攻击,TCP压测脚本

    pip3 install string&&scapy 1 #!/usr/bin env python 2 #-*-coding:utf-8-*- 3 import socket,ran ...

  4. Sentinel介绍与使用 收藏起来

    点赞再看,养成习惯,微信搜索[牧小农]关注我获取更多资讯,风里雨里,小农等你,很高兴能够成为你的朋友. 项目源码地址:公众号回复 sentinel,即可免费获取源码 前言 在家休息的的时候,突然小勇打 ...

  5. map计算

    map理解 参考1: https://github.com/rafaelpadilla/Object-Detection-Metrics 参考2:https://github.com/rafaelpa ...

  6. Hadoop入门学习笔记(一)

    Week2 学习笔记 Hadoop核心组件 Hadoop HDFS(分布式文件存储系统):解决海量数据存储 Hadoop YARN(集群资源管理和任务调度框架):解决资源任务调度 Hadoop Map ...

  7. 【多线程与高并发原理篇:4_深入理解synchronized】

    1. 前言 越是简单的东西,在深入了解后发现越复杂.想起了曾在初中阶段,语文老师给我们解说<论语>的道理,顺便给我们提了一句,说老子的无为思想比较消极,学生时代不要太关注.现在有了一定的生 ...

  8. 最强肉坦:RUST多线程

    Rust最近非常火,作为coder要早学早享受.本篇作为该博客第一篇学习Rust语言的文章,将通过一个在其他语言都比较常见的例子作为线索,引出Rust的一些重要理念或者说特性.这些特性都是令人心驰神往 ...

  9. net core天马行空系列-可用于依赖注入的,数据库表和c#实体类互相转换的接口实现

    1.前言 hi,大家好,我是三合.作为一名程序猿,日常开发中,我们在接到需求以后,一般都会先构思一个模型,然后根据模型写实体类,写完实体类后在数据库里建表,接着进行增删改查, 也有第二种情况,就是有些 ...

  10. CAP 6.1 版本发布通告

    前言 今天,我们很高兴宣布 CAP 发布 6.1 版本正式版,在这个版本中我们主要针对目前已经发现的几个BUG进行了修复了以及添加了一些小特性. 那么,接下来我们具体看一下吧. 总览 可能有些人还不知 ...