华为AREngine有用吗。

华为AREngine是一个名不见经传的手机中的一个小小的框架程序,并且还很少用到,但是在目前元宇宙爆火的情况下,华为AREngine就显得非常重要了,它可以增强我们的AR和VR的体验,但是很多用户还是不理解,那么下面就让小编给大家介绍一下。

华为AREngine有用吗。

目前 AR Engine 可提供三大类能力,包括运动跟踪、环境跟踪、人体和人脸跟踪,已经应用到我们的生活之中,只要我们使用到AR和VR就会使用到这款框架,让我们可以轻松的使用AR和VR功能,带来更加真实的效果,并且还有不同的优点,下面给大家介绍一下:

持续跟踪设备相对于周围环境的位置和姿态变化轨迹,建立虚拟数字世界和现实物理世界的统一几何空间,为您的应用提供虚实融合的交互基础平台,目前运动跟踪主要包括以下能力:运动跟踪、命中检测。

运动跟踪

持续稳定跟踪终端设备的位置和姿态相对于周围环境的变化,同时输出周围环境特征的三维坐标信息。

AR Engine 主要通过终端设备摄像头标识特征点,并跟踪这些特征点的移动变化,同时将这些点的移动变化与终端设备惯性传感器结合,来不断跟踪终端设备位置和姿态。

通过将 AR Engine 提供的设备摄像头的位姿与渲染 3D 内容的虚拟摄像机的位姿对齐,您可从观察者视角渲染虚拟物体,并可叠加到摄像头图像中,实现虚实融合。

命中检测

用户可通过点击终端设备屏幕选中现实环境中的兴趣点。

AR Engine 通过命中检测技术,将终端设备屏幕上的兴趣点映射为现实环境中的兴趣点,并以兴趣点为源发出一条射线连接到摄像头所在位置,然后返回射线与平面(或特征点)的交点。命中检测能力使您可与虚拟物体进行交互。

跟踪设备周围的光照、平面、图像、物体、环境表面等环境信息,辅助您的应用实现虚拟物体以场景化的方式逼真地融入现实物理世界。目前环境跟踪主要包括以下能力:光照估计、平面检测、图像跟踪、环境 Mesh、平面语义、3D 云识别、目标语义。

光照估计

跟踪设备周围的光照信息,支持估计环境光的强度。

AR Engine 可跟踪设备周围的光线信息,并计算出摄像头图像的平均光照强度。光照估计能力可让虚拟物体融入到真实的光照环境中,看起来更加逼真。

平面检测

检测水平和垂直平面(例如地面或墙面)。

AR Engine 可识别到水平和垂直平面(地面或墙面)上的成群特征点,并可识别到平面的边界,您的应用可使用这些平面来放置您需要的虚拟物体。

图像跟踪

识别和跟踪 2D 图像的位置和姿态。

AR Engine 提供图像识别与跟踪的能力,检测场景中是否存在用户提供的图像,识别之后输出图像的姿态。

通过图像识别与跟踪功能,您可实现基于现实世界场景中图像(海报或封面等)的增强现实。您可提供一组参考图像,当这些图像出现在终端设备的相机视野范围内时,AR Engine 可为您的 AR 应用实时跟踪图像,丰富场景理解及交互体验。

环境 Mesh

实时计算并输出当前画面中的环境 Mesh 数据,可用于处理虚实遮挡等应用场景。

AR Engine 提供实时输出环境 Mesh 能力,输出内容包括终端设备在空间中的位姿,当前相机视角下的三维网格,目前拥有后置深度摄像头的机型支持,且支持的扫描环境为静态场景。

通过环境 Mesh 能力,您可将虚拟物体放置在任意可重建的曲面上,而不再受限于水平面和垂直面。同时您可利用重建的环境 Mesh 实现虚实遮挡和碰撞检测,使得虚拟角色能够准确的知道当前所在的周围三维空间情况,帮助您实现更好的沉浸式 AR 体验。

平面语义

识别平面语义(例如桌面、地板、门等)。

AR Engine 可识别当前平面的语义,目前可以识别桌面、地板、墙壁、座位、天花板、门、窗户、床。

3D 云识别

识别和跟踪 3D 物体的位置和姿态。

AR Engine 检测场景中是否存在用户在云侧配置的 3D 物体,当这些物体出现在终端设备的相机视野范围内时,云侧实时返回识别结果至终端设备,实现基于现实世界场景中 3D 物体的增强现实。

目标语义

识别物体的标签及形状。

AR Engine 可识别物体的标签和形状,目前可以识别桌子、椅子,支持识别的形状包含立方体、圆形、矩形。

2D 云识别

识别和跟踪云端 2D 图像的数据。

AR Engine 检测场景中是否存在用户在云侧配置的 2D 图像,当这些图像出现在终端设备的相机视野范围内时,云侧实时返回识别结果至终端设备,实现基于现实世界场景中 2D 图像的交互。

跟踪人脸、人体、手势等实时信息,以辅助您的应用实现用户与虚拟物体交互的能力。

手势识别

识别特定的手势和特定的动作。

AR Engine 提供多种特定手势的识别,输出识别到的手势类别结果并给出手掌检测框屏幕坐标,左手和右手均可支持。当图像中出现多只手时,只反馈单手(最清晰且置信度最高)识别结果和坐标信息。支持前后置相机切换。

通过手势识别能力,可将虚拟物体叠加到人的手部位置,并根据不同的手势变化来激活某些状态的切换,这可给您的 AR 应用提供基础的交互功能并增加新的玩法。

手部骨骼跟踪

识别和跟踪 21 个手部关节点的位置和姿态,形成手部骨骼模型,并可分辨左右手。

AR Engine 提供单手关节点和骨骼识别能力,输出手指端点、手部骨骼等手部高级特征。当图像中出现多只手时,只反馈单手(最清晰且置信度最高)识别结果和坐标信息。目前仅 Mate 20 Pro、Mate 20 RS 前置深度摄像头支持。

通过手部骨骼识别能力,您可将虚拟物体叠加到更为精确的手部位置,例如手指尖、手掌心等;利用手部骨骼,可驱动虚拟手做出更为丰富和精细的动作,这可给您的 AR 应用提供增强的交互功能和难以置信的新奇玩法。

人体姿态识别

识别特定的人体姿态,目前支持 6 种特定姿态。

AR Engine 提供单人的身体姿态识别能力,识别六种静态身体姿势并输出识别结果,支持前后摄像机切换。

您可将人体姿态识别能力运用在需要识别动作并触发某些事件的应用场景,比如交互界面控制、游戏操作动作识别等触发类交互行为,是体感应用的基础核心功能,为您的 AR 应用提供较远距离远程控制和协作的能力,丰富应用的交互体验。

人体骨骼跟踪

识别和跟踪 23 个身体骨骼点的 2D 位置(或 15 个骨骼点的 3D 位置),支持单人和双人。

AR Engine 提供单人和双人的身体关节点识别能力。支持 2D 骨骼(屏幕坐标系)和 3D 骨骼(与 SLAM 结合的空间坐标系)的输出,支持前后置相机切换。

通过人体骨骼识别能力,您可将虚拟物体叠加到人体的指定部位,例如左肩、右脚踝等;利用人体骨骼,可驱动虚拟人偶做出更为丰富和精细的动作,这可给您的 AR 应用提供大范围的交互功能和难以置信的新奇玩法。

人体 Mask

识别和跟踪当前画面人体所在区域,并提供该区域的深度信息。

AR Engine 提供单人或双人身体轮廓的识别和跟踪能力,实时输出人体轮廓 Mask 信息和对应的骨骼点信息。

通过人体轮廓跟踪能力,您可利用人体的轮廓 Mask 信息对虚拟物体和场景进行遮蔽。比如在 AR 拍照时更换虚拟背景、让虚拟玩偶躲到人身后等,都可使用 Mask 能力来实现更为自然的遮挡效果,这可进一步提升 AR 应用的真实感和观看体验。

人脸表情跟踪

实时计算人脸的位姿及各表情对应的参数值,可用于人脸表情直接控制虚拟形象的表情。

AR Engine 提供人脸表情跟踪的能力,跟踪获取人脸图像信息,实时将其理解成人脸表情内容,并转化成各种表情参数。利用表情参数可控制虚拟形象的表情展现。

AR Engine 提供的表情种类为 64 种,包含眼睛、眉毛、眼球、嘴巴、舌头等主要脸部器官的表情动作。

人脸 Mesh

实时计算人脸的位姿及 Mesh 模型数据,Mesh 模型数据实时跟随人脸形变和运动。

AR Engine 提供高精度人脸 Mesh 建模及跟踪能力,在获取人脸图像信息后,实时建立逼真的 Mesh 模型。Mesh 模型随着人脸的移动变形发生相应的位置和形状变化,达到实时精确捕捉动作的效果。

AR Engine 提供 4 千多个顶点、7 千多个三角形面片的 Mesh,能精细勾勒脸部轮廓,增强体验效果。

人脸健康检测

实时计算人脸健康信息,同时计算人体关键健康信息(如心率等)。

AR Engine 提供人体健康检测的能力,包括心率、呼吸率、面部健康状态、心率波形图信号等健康信息。

以上就是华为AREngine是什么功能的全部内容,希望以上内容能帮助到朋友们。

本文来自网络投稿,来自作者春天。不代表酷牛教程立场,如若转载,请注明出处:https://www.xukn.com/171591.html

(0)
春天春天
上一篇 2023-05-21 06:12
下一篇 2023-05-21 06:12

相关推荐

  • 为什么wifi连接上却不能上网。

    当我们在使用电子产品连接WiFi之后,发现自己连接了WiFi却无法上网,但是其他人可以用,无论是手机还是电脑呢都会出现这种情况,那怎么解决这种情况问题呢,下面就和小编一起来看看吧!...

    2023-05-21 其他教程
    0230
  • 妹说就是零卡是什么意思。

    妹说就是零卡是最近非常火爆的一个口头禅,往往用于在健身人群和我们日常的吃饭过程中,经常会有用户在媒体平台上看到这样的评论,所以想要知道妹说就是零卡是什么意思,下面就让小编给大家介绍...

    2023-05-21
    0200
  • 小米air2pro怎么样。

    10月13日上午,小米真无线蓝牙耳机Air 2 Pro发布,它是小米首款真无线主动降噪蓝牙耳机,也是小米真无线蓝牙耳机系列的旗舰产品,小米耳机中的“超大杯”。那么小米air2pro...

    2023-05-15
    0260
  • 华为鸿蒙系统app是什么格式。

    鸿蒙系统app是什么格式?对于很多喜欢研究系统科技的用户来说,想要知道鸿蒙系统app是什么格式?因为鸿蒙是第三大系统,所以很好奇,下面就让小编给大家介绍一下。 1、Hap格式,但是...

    2023-05-20
    0320
  • 华为纯净模式是什么意思。

    华为纯净模式是什么意思?华为鸿蒙系统最新的纯净系统非常的强大,但是没有接触过的用户不知道纯净模式是什么意思?那么下面就让小编给大家介绍一下。 简单理解就是用户不用担心下载的 App...

    2023-05-20
    0280
  • 一针的新冠疫苗和两针的哪个好。

    一针的新冠疫苗和两针的哪个好?对于很多地区的人民来说,新冠疫苗也才开始接种,但是突然出现了一针的疫苗,所以很多人就会想要知道一针的新冠疫苗和两针的哪个好?那么下面就让小编给大家介绍...

    2023-05-20
    0240
  • 充电提示音APP有哪些。

    充电提示音APP有哪些?最近爆火的手机充电提示音APP汇总来了,为了让大家都能体验到充电提示音,下面小编为大家找了几款充电提示音必备的手机软件,通过软件修改充电提示音,下面就让小编...

    2023-05-15
    0180
  • 鸿蒙怎么设置24小时时间。

    鸿蒙怎么设置24小时时间?在鸿蒙系统中,我们可以将手机设置成12小时制、24小时制,不过很多用户不喜欢12小时制,如何将时间设置成24小时制呢,下面就和小编一起来看看吧! 1、打开...

    2023-05-21
    0250
  • 国旗渐变头像怎么弄。

    在国庆节到来之前,很多小伙伴在找国旗渐变头像制作教程,相对比去年的国旗头像,今年的国旗头像更加独特、不同,那怎么制作国旗渐变头像呢,下面就和小编一起来看看吧! 1、将下方分享的国旗...

    2023-05-21 其他教程
    0230
  • 英雄联盟s10观赛资格要求有哪些。

    英雄联盟赛事官方将通过实名证件登记 + 公证摇号抽取 + 观赛资格确认 + 人脸核身凭证入场 共四步严格进行线下观赛资格的产生和管理。那么英雄联盟s10观赛资格要求有哪些呢?下面就...

    2023-05-15
    0320
  • 华为p50有5G版本吗。

    华为P50是万众瞩目的手机,但是关于手机很多用户都不太了解,想要知道这款手机有没有5G功能,那么下面就让小编给大家介绍一下手机相关网络情况。 有5G版本,但是比较少,华为P50系列...

    2023-05-21
    0240
  • 天玑9000和麒麟9000什么关系。

    联发科发布了旗下最新的期间处理器,是基于4nm工艺制程的芯片,也是目前行业顶尖的处理器,并且也是一改之前命名风格直接称其为天玑9000,很多网友就联想会不会和华为的麒麟9000有关...

    2023-05-21
    0220
  • MagSafe外接电池充电速度怎么样。

    MagSafe外接电池已经推出,感兴趣的小伙伴已经可以进行线下购买,并且可以马上进行体验,但是很多用户关心的是充电速度怎么样,那么下面就让小编给大家介绍一下。 有博主进行了测试了,...

    2023-05-21
    0260
  • 中国联通SIM卡PIN码初始密码是多少。

    中国联通SIM卡PIN码初始密码是多少?SIM卡的PIN码是保护SIM卡安全的重要保障,那我们在办理SIM卡之后,想要修改PIN码,该怎么使用初始密码修改SIMPIN码呢,中国联通...

    2023-05-16 其他教程
    0220
  • 山西暴雨怎么捐款。

    近期山西遭遇了持续降雨,导致多地接连发生崩塌、滑坡等地质灾害,城市内涝严重,很多小伙伴都在请关注山西水灾汛情,想要为山西出一份力,那在哪里可以进行捐款救助呢,下面就和小编一起来看看...

    2023-05-21 其他教程
    0210

发表回复

登录后才能评论