iOS11-ARKit尝鲜

iOS AR开发环境

  • 硬件:A9以上芯片(se 6s 6ps 7 7ps ipad)
  • 开发工具:xcode 9
  • 运行系统:iOS 11

AR平台

iOS AR平台使用的是高级API,它站在两位巨人的肩膀上:


1、AVFoundation
它是一个OC媒体数据的高级框架。AVFoundation的构建考虑到了目前的硬件环境和应用程序,其设计过程高度依赖多线程机制。充分利用了多核硬件的优势并大量使用block和GCD机制,将复杂的计算机进程放到了后台线程运行。会自动提供硬件加速操作,确保在大部分设备上应用程序能以最佳性能运行。该框架就是针对64位处理器设计的,可以发挥64位处理器的所有优势。

2、Core Motion
它不仅仅提供给你获得实时的加速度值和旋转速度值,更重要的是,苹果在其中集成了很多算法,可以直接给你输出把重力 加速度分量剥离的加速度,省去你的高通滤波操作,以及提供给你一个专门的设备的三维attitude信息!

AR特性

  • 全局追踪
    AR不仅可以追踪我们的现实场景,还可以追踪我们的虚拟物件,如果缺少这两个功能,所谓的AR,其实就是gif图片
  • 视觉惯性测距
    和我们人眼功能一样,靠近物体,变大,远离物体,变小。
  • 没有外部设置
    只需要一部手机就ok,不需要其他设备支持

场景理解

  • 平面检测(现实世界的理解)
    平面检测是场景理解里面最重要的,我们可以想象这个世界都是由点、线、面组成的,在AR场景我们所能看到的世界也是通过点、线、面构成。

  • 命中测试(物体运动产生碰撞)

  • 光估计(灯光下虚拟物件的阴影效果)

渲染

  • 简单集合
    苹果为我们提供了SceneKi(ios8)t、SpriteKi(ios7)t、Metal(ios7)三个渲染工具


【SpriteKit】

在iOS7中内置了新的SpriteKit框架,该框架主要用来开发2D游戏。是开发iOS和OS X 下的2D游戏引擎,可以使用OC或者Swift来进行开发。目前已经支持的内容包括:精灵、很酷的特效(例如视频、滤镜和遮罩),并且还集成了物理库等许多东西。首先指出在ios中开发2D游戏SpriteKit并不是唯一的选择,我们先来看看SpriteKit的特点和优缺点:
==特点==
(1)提供了游戏引擎必备的图形渲染和动画API,可以通过这些API让精灵动起来;
(2)使用传统的渲染和动画,允许在渲染每一帧之前处理该帧;
(3)提供了声音播放;
(4)提供的物理引擎;
(5)与Xcode集成,可以更容易的创建基于Sprite Kit的游戏工程,调试也很方便;
(6)可以使用swift语言;

==优点==
(1)它是内置到iOS中的,因此并不需要下载额外的库或者其他的外部依赖,并且它是由苹果开发的,所以对他的支持和更新我们可以放心;
(2)它内置的工具支持纹理和粒子;
(3)它可以让你做一些其他框架难以做到的事情,例如把视频当做精灵一样处理,或者使用很酷的图形效果和遮罩。

==缺点==
(1)如果使用了SpriteKit,那么你将被iOS生态圈绑架,导致很难把游戏移植到Android等其他平台;
(2)SpriteKit现在还处于初始阶段,提供的内容还不够丰富,例如Cocos2D,暂不支持自定义的OpenGL代码;

【SceneKit】

SceneKit(SK)是WWDC12推出的OS X平台的cocos 3D渲染引擎框架。支持粒子效果,物理模拟,脚本事件,多程渲染,支持iOS平台。SceneKit整合了Core Image,Core Animation之类的图形框架,现在还整合进了SpriteKit。
SceneKit是基于OpenGL构建的。

【Metal】

在iOS8中,苹果发布了一个新的接口叫做Metal,它是一个支持GPU加速的3D绘图API。Metal和OpenGL ES类似,也是一个底层API,负责和3D绘图硬件交互。可惜的是,Metal不是跨平台的。

  • AR视图
    类似于UIView,这里的显示3D场景的是SCNView
  • 自定义渲染
    如果你不喜欢苹果提供的渲染工具,我们还可以用unity和unreal这两个虚拟引擎


ARKit运行原理


看上面ARKit的结构图,发现它的运行原理其实很简单。ARKit负责场景采集,SceneKIt负责显示3D模型,通过ARSession这个核心类,将3d模型和现实世界组合在一起,最后在ARScnView上显示。
在3D世界中,每一个模型都是一个Scene,每一个Scene都有一个根节点SCNNode,类似于NSobject,我们设置节点实际上就是设置3D物体,包括形状位置和大小。

创建我们的第一个AR项目

1、选择AR



2、选择SceneKit



3、默认生成ARScnView相当于UIView

4、真机运行,有飞机?对,苹果默认创建的3D模型,有没有被感动到。
5、去掉默认代码,实现我们下面三个简单效果。

  • 3D盒子
  • 点击星球,改变场景
  • 场景截图


6、demo下载(源码有注释、工程中含详细的类结构图)

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,324评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,303评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,192评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,555评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,569评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,566评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,927评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,583评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,827评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,590评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,669评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,365评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,941评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,928评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,159评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,880评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,399评论 2 342

推荐阅读更多精彩内容

  • ARkit Introducing ARKit iOS 11引入ARKit,这是 个全新的框架,允许开发者轻松地为...
    坤哥爱卿阅读 1,323评论 0 1
  • Introducing ARKit iOS 11 引入 ARKit,这是 个全新的框架,允许开发者轻松地为 iP...
    没八阿哥的程序阅读 2,400评论 1 9
  • ARKit ARKit框架通过集成iOS设备摄像头和运动功能,在您的应用程序或游戏中产生增强现实体验。 概述 增强...
    暗夜夜夜行路阅读 5,783评论 0 17
  • 有种感情从认识,到喜欢,然后默默关注,默默守护,独自承受,变的特别熟悉,不再是可以表白,两人的关系,比谁都好,比谁...
    桜倾阅读 132评论 0 0
  • 文| 麻生生 对于现在的我来说,高中生活已经变成过去式。我怀念那时的时光,虽然累,但却充实。让自己每天都有点事情可...
    _Gloria_阅读 533评论 2 0