华为AREngine是一个名不见经传的手机中的一个小小的框架程序，并且还很少用到，但是在目前元宇宙爆火的情况下，华为AREngine就显得非常重要了，它可以增强我们的AR和VR的体验，但是很多用户还是不理解，那么下面就让小编给大家介绍一下。

目前AREngine可提供三大类能力，包括运动跟踪、环境跟踪、人体和人脸跟踪，已经应用到我们的生活之中，只要我们使用到AR和VR就会使用到这款框架，让我们可以轻松的使用AR和VR功能，带来更加真实的效果，并且还有不同的优点，下面给大家介绍一下：

运动跟踪

持续跟踪设备相对于周围环境的位置和姿态变化轨迹，建立虚拟数字世界和现实物理世界的统一几何空间，为您的应用提供虚实融合的交互基础平台，目前运动跟踪主要包括以下能力：运动跟踪、命中检测。

运动跟踪

持续稳定跟踪终端设备的位置和姿态相对于周围环境的变化，同时输出周围环境特征的三维坐标信息。

AREngine主要通过终端设备摄像头标识特征点，并跟踪这些特征点的移动变化，同时将这些点的移动变化与终端设备惯性传感器结合，来不断跟踪终端设备位置和姿态。

通过将AREngine提供的设备摄像头的位姿与渲染3D内容的虚拟摄像机的位姿对齐，您可从观察者视角渲染虚拟物体，并可叠加到摄像头图像中，实现虚实融合。

命中检测

用户可通过点击终端设备屏幕选中现实环境中的兴趣点。

AREngine通过命中检测技术，将终端设备屏幕上的兴趣点映射为现实环境中的兴趣点，并以兴趣点为源发出一条射线连接到摄像头所在位置，然后返回射线与平面(或特征点)的交点。命中检测能力使您可与虚拟物体进行交互。

环境跟踪

跟踪设备周围的光照、平面、图像、物体、环境表面等环境信息，辅助您的应用实现虚拟物体以场景化的方式逼真地融入现实物理世界。目前环境跟踪主要包括以下能力：光照估计、平面检测、图像跟踪、环境Mesh、平面语义、3D云识别、目标语义。

光照估计

跟踪设备周围的光照信息，支持估计环境光的强度。

AREngine可跟踪设备周围的光线信息，并计算出摄像头图像的平均光照强度。光照估计能力可让虚拟物体融入到真实的光照环境中，看起来更加逼真。

平面检测

检测水平和垂直平面(例如地面或墙面)。

AREngine可识别到水平和垂直平面(地面或墙面)上的成群特征点，并可识别到平面的边界，您的应用可使用这些平面来放置您需要的虚拟物体。

图像跟踪

识别和跟踪2D图像的位置和姿态。

AREngine提供图像识别与跟踪的能力，检测场景中是否存在用户提供的图像，识别之后输出图像的姿态。

通过图像识别与跟踪功能，您可实现基于现实世界场景中图像(海报或封面等)的增强现实。您可提供一组参考图像，当这些图像出现在终端设备的相机视野范围内时，AREngine可为您的AR应用实时跟踪图像，丰富场景理解及交互体验。

环境Mesh

实时计算并输出当前画面中的环境Mesh数据，可用于处理虚实遮挡等应用场景。

AREngine提供实时输出环境Mesh能力，输出内容包括终端设备在空间中的位姿，当前相机视角下的三维网格，目前拥有后置深度摄像头的机型支持，且支持的扫描环境为静态场景。

通过环境Mesh能力，您可将虚拟物体放置在任意可重建的曲面上，而不再受限于水平面和垂直面。同时您可利用重建的环境Mesh实现虚实遮挡和碰撞检测，使得虚拟角色能够准确的知道当前所在的周围三维空间情况，帮助您实现更好的沉浸式AR体验。

平面语义

识别平面语义(例如桌面、地板、门等)。

AREngine可识别当前平面的语义，目前可以识别桌面、地板、墙壁、座位、天花板、门、窗户、床。

3D云识别

识别和跟踪3D物体的位置和姿态。

AREngine检测场景中是否存在用户在云侧配置的3D物体，当这些物体出现在终端设备的相机视野范围内时，云侧实时返回识别结果至终端设备，实现基于现实世界场景中3D物体的增强现实。

目标语义

识别物体的标签及形状。

AREngine可识别物体的标签和形状，目前可以识别桌子、椅子，支持识别的形状包含立方体、圆形、矩形。

2D云识别

识别和跟踪云端2D图像的数据。

AREngine检测场景中是否存在用户在云侧配置的2D图像，当这些图像出现在终端设备的相机视野范围内时，云侧实时返回识别结果至终端设备，实现基于现实世界场景中2D图像的交互。

人体和人脸跟踪

跟踪人脸、人体、手势等实时信息，以辅助您的应用实现用户与虚拟物体交互的能力。

手势识别

识别特定的手势和特定的动作。

AREngine提供多种特定手势的识别，输出识别到的手势类别结果并给出手掌检测框屏幕坐标，左手和右手均可支持。当图像中出现多只手时，只反馈单手(最清晰且置信度最高)识别结果和坐标信息。支持前后置相机切换。

通过手势识别能力，可将虚拟物体叠加到人的手部位置，并根据不同的手势变化来激活某些状态的切换，这可给您的AR应用提供基础的交互功能并增加新的玩法。

手部骨骼跟踪

识别和跟踪21个手部关节点的位置和姿态，形成手部骨骼模型，并可分辨左右手。

AREngine提供单手关节点和骨骼识别能力，输出手指端点、手部骨骼等手部高级特征。当图像中出现多只手时，只反馈单手(最清晰且置信度最高)识别结果和坐标信息。目前仅Mate20Pro、Mate20RS前置深度摄像头支持。

通过手部骨骼识别能力，您可将虚拟物体叠加到更为精确的手部位置，例如手指尖、手掌心等;利用手部骨骼，可驱动虚拟手做出更为丰富和精细的动作，这可给您的AR应用提供增强的交互功能和难以置信的新奇玩法。

人体姿态识别

识别特定的人体姿态，目前支持6种特定姿态。

AREngine提供单人的身体姿态识别能力，识别六种静态身体姿势并输出识别结果，支持前后摄像机切换。

您可将人体姿态识别能力运用在需要识别动作并触发某些事件的应用场景，比如交互界面控制、游戏操作动作识别等触发类交互行为，是体感应用的基础核心功能，为您的AR应用提供较远距离远程控制和协作的能力，丰富应用的交互体验。

人体骨骼跟踪

识别和跟踪23个身体骨骼点的2D位置(或15个骨骼点的3D位置)，支持单人和双人。

AREngine提供单人和双人的身体关节点识别能力。支持2D骨骼(屏幕坐标系)和3D骨骼(与SLAM结合的空间坐标系)的输出，支持前后置相机切换。

通过人体骨骼识别能力，您可将虚拟物体叠加到人体的指定部位，例如左肩、右脚踝等;利用人体骨骼，可驱动虚拟人偶做出更为丰富和精细的动作，这可给您的AR应用提供大范围的交互功能和难以置信的新奇玩法。

人体Mask

识别和跟踪当前画面人体所在区域，并提供该区域的深度信息。

AREngine提供单人或双人身体轮廓的识别和跟踪能力，实时输出人体轮廓Mask信息和对应的骨骼点信息。

通过人体轮廓跟踪能力，您可利用人体的轮廓Mask信息对虚拟物体和场景进行遮蔽。比如在AR拍照时更换虚拟背景、让虚拟玩偶躲到人身后等，都可使用Mask能力来实现更为自然的遮挡效果，这可进一步提升AR应用的真实感和观看体验。

人脸表情跟踪

实时计算人脸的位姿及各表情对应的参数值，可用于人脸表情直接控制虚拟形象的表情。

AREngine提供人脸表情跟踪的能力，跟踪获取人脸图像信息，实时将其理解成人脸表情内容，并转化成各种表情参数。利用表情参数可控制虚拟形象的表情展现。

AREngine提供的表情种类为64种，包含眼睛、眉毛、眼球、嘴巴、舌头等主要脸部器官的表情动作。

人脸Mesh

实时计算人脸的位姿及Mesh模型数据，Mesh模型数据实时跟随人脸形变和运动。

AREngine提供高精度人脸Mesh建模及跟踪能力，在获取人脸图像信息后，实时建立逼真的Mesh模型。Mesh模型随着人脸的移动变形发生相应的位置和形状变化，达到实时精确捕捉动作的效果。

AREngine提供4千多个顶点、7千多个三角形面片的Mesh，能精细勾勒脸部轮廓，增强体验效果。

人脸健康检测

实时计算人脸健康信息，同时计算人体关键健康信息(如心率等)。

AREngine提供人体健康检测的能力，包括心率、呼吸率、面部健康状态、心率波形图信号等健康信息。

以上就是华为AREngine是什么功能的全部内容，希望以上内容能帮助到朋友们。

免责声明：本文内容来自用户上传并发布，站点仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。请核实广告和内容真实性，谨慎使用。