随着元宇宙的兴起,3D虚拟现实广泛引用,让数字化信息和现实世界融合,目前大家的目光主要聚焦于视觉交互层面,为了在虚拟环境中更好的再现真实世界的三维空间体验,引入听觉层面必不可少,空间音频孕育而生. 空间音频是一种音频体验,会让用户更容易体验到声音的立体感和深度,将环绕声更准确地定位在合适的方位,让用户在生理上获得更身临其境的环绕效果.目前主要应用在AR.VR.语音视频聊天室.在线会议.在线游戏.虚拟演唱会等,以及对象音频制作等场景. 针对开发者的需求,华为HMS CoreAR Engine XR…

2022年6月28日,HDD·HMS Core.Sparkle影音娱乐沙龙在线上与开发者们见面.HMS Core音频编辑服务(Audio Editor Kit)专家为大家详细分享了基于分离的3D音乐创作技术,引起了行业及音乐爱好者的关注. 音频3D化是音频发展的重要方向,但当前从源头制作3D音频成本高,时间长,具有较高门槛.而基于HMS Core音频编辑服务提供的音源分离和空间音频渲染能力可快速制作3D音乐,助力广大开发者快速进入3D音频的新时代. 实时分离人声.伴奏和乐器声 目前,音频编辑服务…

AR技术已经被广泛应用于营销.教育.游戏.展览等场景.通过2D图像跟踪技术和3D物体跟踪技术,用户只需使用一台手机进行拍摄,即可实现海报.卡牌等平面物体以及文物.手办等立体物体的AR效果.尽管近年来2D图像跟踪和3D物体跟踪算法已经取得了很大的进步,但受限于环境等因素影响,效果仍然有很大提升空间,是目前AR开发者的研发难点. HMS Core AR Engine提供了2D图像和3D物体的端云协同跟踪技术,让开发者更简单便捷地开发AR类应用,让用户拥有更丰富的AR交互体验. 2D图像跟踪技术 端云…

AR是一项现实增强技术,即在视觉层面上实现虚拟物体和现实世界的深度融合,打造沉浸式AR交互体验.而想要增强虚拟物体与现实世界的融合效果,光照估计则是关键能力之一. 人们所看到的世界外观,都是由光和物质相互作用而决定的,当光源照射到物体上时,光线通过被吸收.反射和透射等方式,传递给人们物体的颜色.亮度和阴影等信息,成为人们视觉层面上构建物体外观的主要因素.因此,AR应用若要将3D虚拟物体融于现实世界并具备真实感,前提就是要拥有和现实世界一致的光照条件. 特性介绍 光照估计是指在AR应用场景中的光照…

随着电子产品的普遍应用,AR技术也开始广泛普及,在游戏.电商.家装等领域都有涉及.比如,在室内设计时,我们可以通过AR技术在实际场景中进行虚拟软装的搭配,运用华为AR Engine运动跟踪能力在实际应用中实时输出室内环境的三维坐标信息,确定现实室内环境和虚拟软装之间的变换关系,从而稳定精准的实现软装在室内空间的合理放置. 作为华为AR Engine的一项基本能力,运动跟踪能力主要通过持续稳定跟踪终端设备的位置和姿态相对于周围环境的变化,同时输出周围环境特征的三维坐标信息,在AR 技术的实际应用中…

AR技术的落地应用,推动着电商领域的不断升级,通过增强现实为用户带来了虚拟与现实结合的AR购物体验.如AR试衣.AR试鞋.AR试妆等功能的出现让用户在手机上就能体验产品的佩戴效果,可以让用户更直观.更真实的了解产品信息,提升消费者的购物愉悦感,帮助电商应用提高购物转化率.华为AR Engine也为AR购物提供了实现方案,使用手部跟踪能力即可实现虚拟手表试戴. 效果展示 实现方法 AR Engine提供手部骨骼跟踪能力,可以识别跟踪21个手部关节点的位置和姿态,形成手部骨骼模型.通过手势识别能力,…

近年来,AR版块成为时下大热,这是一种将现实环境中不存在的虚拟物体融合到真实环境里的技术,用户借助显示设备可以拥有真实的感官体验.AR的应用场景十分广泛,涉及娱乐.社交.广告.购物.教育等领域:AR可以让游戏更具互动性:商品通过AR展示更真实:使用AR进行教育教学让抽象事物更形象等,可以说AR技术已经渗透人们生活的方方面面. 为了让人们产生强烈的视觉真实感,AR首先要解决的问题就是如何将虚拟对象准确地融合到现实世界中,即让虚拟对象以正确的姿态显示在真实场景的正确位置上.一些AR方案完成环境识别与…

现如今,人们在网上聊天.发帖时越来越爱用表情包,表情包一方面是一种个性化的表达方式,另一方面更能传达出当下的心理活动,可以说在网络社交中表情包是一个不可或缺的存在.加上近年来元宇宙的兴起,3D虚拟形象广泛应用,用户可以通过自己的表情来控制虚拟形象的表情,做一系列专属的表情包,更加生动形象. 那么,如何让虚拟形象拥有人类一样多变的表情呢?HMS CoreAR Engine的人脸表情跟踪能力就能帮助实现,实时计算人脸各表情对应的参数值.用户可通过自己的面部动作,控制虚拟人物的表情,最终制作成虚拟人物…

在AR应用中,用户最不希望看到不真实的穿模现象发生,如虚拟形象部分身体陷入墙壁之中,或者未碰到墙壁却已无法移动,这种不真实的交互十分影响用户体验.那如何才能让避免虚拟物体的穿模问题呢?使用AR Engine的环境Mesh能力就能帮助开发者解决这个问题. 效果展示 实现方法 AR Engine提供实时计算并输出画面环境Mesh数据的能力.通过环境Mesh能力虚拟角色可以准确识别当前所处三维空间的情况,让虚拟物体不仅仅能放置在水平面和垂直面上,还可以放置在任意可重建的曲面上.开发者可利用重建的环境M…

通过多张普通的照片重建一个立体逼真的3D物体模型,曾经靠想象实现的事情,现在, 使用HMS Core 3D建模服务即可实现! 3D模型作为物品在数字世界中的孪生体,用户可以自己拍摄.建模并在终端直观感受,甚至与现实环境进行交互体验.以下图片为鞋子的建模过程,其建模效果与真实物体几乎无差,应用在电商行业,是对用户体验方式的升级,能为商品营销带来更真实便捷的途径. HMS Core 3D建模服务(3D Modeling Kit)是华为在图形领域又一技术开放,面向有3D模型.动画制作等能力诉求的应用开…