增强现实(Augmented Reality)技术是一种将虚拟信息与真实世界巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,两种信息互为补充,从而实现对真实世界的“增强”。
在本文,您将快速了解到以下9个AR增强现实技术的基础功能:
运动跟踪环境跟踪深度理解光线估算增强图像云锚增强面孔人体追踪手势识别与跟踪快速了解AR技术的9个基础功能
功能1 运动跟踪持续跟踪设备相对于周围环境的位置和姿态变化轨迹,建立虚拟数字世界和现实物理世界的统一几何空间,为应用提供虚实融合的交互基础平台。
图片来源:网络
常见应用场景:家具摆放、AR拍照、AR游戏、教育
功能2 环境跟踪跟踪设备周围的光照、平面、图像、物体、环境表面等环境信息,辅助应用实现虚拟物体以场景化的方式逼真地融入现实物理世界。
图片来源:网络
常见应用场景:家具摆放、AR拍照、AR游戏、教育
Monstarlab China案例展示:
Monstarlab China吉祥物[小熊猫]
功能3 深度理解可以使用支持的设备上的主RGB摄像头创建深度图,这些深度图包含有关到给定点的曲面之间的距离的数据。您可以使用深度图提供的信息来实现身临其境的逼真的用户体验,例如使虚拟对象与观察到的表面准确碰撞,或者使它们出现在现实对象的前面或后面。
图片来源:网络
常见应用场景:家具摆放、AR拍照、AR游戏
功能4 光线估算检测有关其环境照明的信息,并为您提供给定摄像机图像的平均强度和颜色校正。这些信息使用户可以在与周围环境相同的条件下点亮虚拟对象,从而增加了真实感。
图片来源:网络(左侧模特是虚拟的)
常见应用场景:家具摆放、AR拍照、模特秀、AR游戏
功能5 增强图像构建AR应用程序,以检测和增强用户环境中的2D图像,例如海报或产品包装。
常见应用场景:展会
功能6 云锚使用Cloud Anchors,应用程序使用户可以将虚拟对象添加到AR场景。然后,多个用户可以从共享的物理空间中的不同位置同时查看这些对象并与之交互。
云锚在行为上和功能上类似的锚,但在他们的ARCORE云锚服务托管的不同。该托管使用户可以共享经验。
常见应用场景:展会、商场
功能7 增强面孔增强的面部允许应用程序自动识别检测到的面部的不同区域,并使用这些区域以适当匹配单个面部轮廓和区域的方式覆盖诸如纹理和模型之类的资产。
图片来源:网络
常见应用场景:虚拟头像、AR拍照
功能8 人体追踪识别单人和多人的身体关节点和骨骼,可以输出四肢端点、身体姿态、人体骨骼等人体高级特征。支持2D骨骼(屏幕坐标系)和3D骨骼(与SLAM结合的空间坐标系)的输出,目前仅支持后置相机。
Monstarlab XR solution
常见应用场景:真人控制虚拟人物同步运动、AR拍照
功能9 手势识别与跟踪基于RGB和RGBD两种摄像头的实时跟踪与识别手势算法,可以实时输出相机预览中出现的手的信息,包括手势的类型,手势框的坐标,手掌的朝向,左右手的判断,手指关键节点的数量,以及手指关键节点的2D和3D坐标等信息。当前版本只能检测单手的信息,后续会支持多手的检测。
目前可识别14中常用的手势,包括剪刀,石头,布,OK,点赞,666,手枪,比心,我爱你,三根手指,四根手指,小拇指,指尖,金属礼。
图片来源:网络
常见应用场景:AR游戏,创意互动
Monstarlab China案例展示:AR短视频特效拍摄工具-ToFe
基于深度感知摄像头(ToF camera)的AR特效短视频拍摄工具【ToFe】,由梦思特科技(成都)有限公司(以下简称“梦思特中国”)开发。
【ToFe】结合华为AREngine,作为首款基于iToF的移动应用APP首发中国应用市场。目前,这款AR特效短视频APP以小范围、实验性的推广方式,针对华为P30 pro及以上系列机型,在深度感知摄像头(ToF camera)领域尝鲜,探索iToF技术在软件应用层面的可能性。【ToFe】提供丰富的AR特效玩法,利用手势识别,在用户体验上强调“人与空间”的交互,在满足用户使用娱乐性同时,最大化呈现深度感知摄像头(ToF camera)的特性。
【ToFe】AR特效欣赏:「云宠乐园」PetSkyland – SkyChange
【ToFe】AR特效欣赏2:「蔚蓝之邦SkyArk」 – SkyChange