初探AR

AR相关 - ARKit的理解

要想很好的开发AR项目,首先还是要对ARKit有个基本的了解,那我们现在就来看看一些常用类的含义

现实 - ARKit

1.ARSession

  • 负责采集现实世界的信息 - 世界追踪

  • 这是一个管理增强现实所需要的 设备摄像头和动作处理 的共享的对象。

  • ARSession对象会协调 增强现实过程中的大部分处理:

    • 从设备的动作感应硬件读取数据
    • 控制设备内置摄像头
    • 对捕捉到的摄像图像进行分析
  • ARSession会整合这些结果,并在设备反馈的现实空间和模型化AR内容的虚拟空间之间建议一种对应关系

  • 注意:session是一个管理类,捕捉真实世界、世界追踪、渲染都是由session完成的。

任何一个用ARKit实现的AR场景都需要一个单独的ARSession对象

  • 如果是使用了'ARSCNView'或者'ARSKView'对象来创建AR场景的话,一个ARSession实例是已经包含在这个view之中了。
  • 如果是通过别的渲染器来建立AR内容的话,就需要手动创建并维持一个ARSession对象。

2.ARConfiguration

  • ARConfiguration类决定了ARKit如何追踪一个设备的位置以及相对于现实世界的运动,是决定创建的AR体验的关键。

  • ARConfiguration子类:

    • AROrientationTrackingConfiguration
      • 使用后置摄像头并仅追踪设备方向来提供基本的AR体验。
      • 从三个自由度上来追踪设备的运动方向 - 3个旋转
    • ARWorldTrackingConfiguration - (平时相对用的最多)
      • 使用后置摄像头精确追踪设备的位置和方向并允许平面检测和碰撞测试来提供高品质的AR体验。
      • 从六个自由度上来追踪设备的运动方向 - 3个平移 & 3个旋转
    • ARFaceTrackingConfiguration
      • 使用前置摄像头并追踪用户面部的移动和表情来提供AR体验。(目前只有iphone X可用)
  • 所有的AR Configuration都是用来建立现实世界和虚拟3D坐标空间的对应关系的。当app将这些虚拟内容和实时捕捉到的摄像机画面一起展示给用户,用户会产生一种这些虚拟内容和现实世界的一部分的错觉。

3.ARFrame

  • ARSession采集到的现实世界的信息以ARFrame的形式返回

  • ARFrame中包含了渲染虚拟世界所有要的所有信息

  • ARFrame包含了两部分:ARAnchorARFrame

4.ARCamera

  • 捕捉现实世界,并把信息交由ARSession处理。

  • AR seaaion中一个被捕获的视图帧相关的相机位置和视图特征的信息

  • ARCamera捕获的数据是一个一个的ARFrame构成。

  • 指的是当前摄像机的位置和旋转信息。

  • 这一部分 ARKit 已经为我们配置好,不用特别配置。

5.ARAnchor

  • 指的是现实世界中的锚点

  • 一个真实世界的位置和方向,可以用于在AR场景中放置物体。

  • 可以把 ARAnchor(锚点)理解为真实世界中的某个点或平面,anchor 中包含位置信息和旋转信息。拿到 anchor 后,可以在该 anchor 处放置一些虚拟物体。

  • 与SCNNode可以绑定

子类:ARPlaneAnchor
  • 专门指的是一个代表水平面的锚点。

虚拟 - SceneKit

  • ARSCNView 是继承自 SCNView 的

  • 展示关于3D物体的属性、方法的都是SCNView(比如:SCNScene、SCNNode)

  • scene是负责虚拟化的类

1.SCNScene

ARSCNView - 3D

  • 是一个用来展示增强相机视图和3D SceneKit内容的AR体验的界面。将虚拟的3D内容和设备相机反应的真实世界结合起来。

  • 主要功能:

    • 将设备相机捕捉到的真实世界的影像作为场景的背景
    • 将真实世界的坐标系统直接映射成AR虚拟世界的坐标系统
    • 自动移动SceneKit相机来配合真实世界中设备的移动

ARSKView - 2D

  • 这个是使用2D SpriteKit制作的。

2.SCNNode

  • 指的是虚拟世界中的节点

  • 根据真实世界的锚点映射成对应的虚拟世界的节点

  • 每个虚拟化的物体都有一个节点,所有的节点都有一个公共的父节点(rootNide)。

渲染 - ARSCNView

  • 主要负责综合 由SceneKit构建的虚拟世界的信息 和 ARSession类采集到的现实世界的信息,然后将它们综合渲染呈现出一个AR世界

总结:

  • ARSCNView结合 SCNScene中的虚拟世界的信息 和 ARSession捕捉到的现实世界的信息,渲染出AR世界。

  • ARConfiguration指导ARSession如何追踪世界,追踪的结果以ARFrame返回。

  • ARFrame中的ARAnchor信息为SceneKit中的SCNNode提供的一些放置的点,以便将虚拟节点和现实锚点绑定。

image.png

参考文章:

有什么写的不对或者不好的地方欢迎指教,我会及时改正的,谢谢大家!

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 200,302评论 5 470
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 84,232评论 2 377
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 147,337评论 0 332
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,977评论 1 272
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,920评论 5 360
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,194评论 1 277
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,638评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,319评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,455评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,379评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,426评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,106评论 3 315
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,696评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,786评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,996评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,467评论 2 346
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,043评论 2 341

推荐阅读更多精彩内容