《滚石》独家专稿，详述Magic Leap One工作原理、外观、感受以及发展
文章相关引用及参考：《滚石》杂志
点击加入Magic Leap第一手资料QQ群 493967447
本文约1.3万字
（映维网 2017年12月21日）Magic Leap昨天发布了一款混合现实头显，他们相信这将能重塑人们与计算机和现实交互的方式。与不透明的潜水员型虚拟现实面罩不同（用虚拟世界取代真实世界），Magic Leap名为Lightwear的设备就如同眼镜一般，而你可以像穿戴一款特殊眼镜一样，透过设备来感知世界。头显需要连接至一个名为Lightpack的强大口袋型计算机，并且可以向现实世界注入逼真的和响应式的可移动虚拟人类，机器人，飞船等一切对象。
Magic Leap成立于2011年，虽然一直保持神秘，但却能持续得到大公司和投资机构的青睐（至今已完成19亿美元融资），并且一直吸引着从业者们的关注，这令科技网站记者和分析师们感到挫败（重要的大新闻，但却无法获取真实的相关信息）。尽管这家公司已经发布了数个高质量的概念视频，展示了在现实世界中注入虚拟创意的前景，但他们一直都没有向市场公开运行中的技术。一直以来，有些媒体甚至公开怀疑整起事情是否只是一场营销骗局。但种种质疑声音没有影响Magic Leap估值的持续上涨，现在这家公司的估值已经高达60亿美元。
创始人罗尼·阿伯维茨支撑起整家公司，这位出色的生物工程师曾帮助设计了Mako Surgical的手术辅助机器人手臂。在Magic Leap成立两年后，著名医疗科技公司史赛克以16.5亿美元的价格收购了Mako Surgical。
Magic Leap最后一次详细公开介绍自己是在大约一年前。当时他们邀请了《Wired》杂志前往南佛罗里达州的总部，体验具体的技术效果，但Magic Leap拒绝《Wired》描述硬件的细节。在本月初，Glixel（《滚石》旗下游戏媒体）也收到了类似的邀请。阿伯维茨邀请我去参观位于劳德代尔堡的总部，撰写关于Magic Leap技术的文章，并且详细介绍他们第一款头显的工作原理，外观和感受。
这是我们第一次真正看到这家神秘的，数十亿估值的公司多年来一直在研发的技术，而这次对外公开是他们朝着在2018年推出首款消费者产品所迈出的第一步。这同时在一定程度上解释了为什么诸如谷歌和阿里巴巴等大公司向Magic Leap投资数以亿计的美元，以及为什么研究人员相信这种技术的意义可以比拟互联网的诞生。南加州大学创新技术研究院MxR实验室的创意负责人大卫·尼尔森（David Nelson）指出，像这样的技术“正将我们推向人机交互的新媒介，这将成为现实的终结。”
1. 体验
我对Magic Leap技术的体验发生在一种音效舞台之中，其位于主建筑以外的一座独立建筑。这是Magic Leap测试未来可能用于主题公园或其他大面积场所的体验的地方。我的体验几乎长达一个小时，足够我描述Magic Leap的技术和我自己的想法，但Magic Leap要求我不要透露具体的角色或IP。在大部分情况下，这都是永远不会面世的体验。Magic Leap构建它们的原因，是让参观者在保密协议之下参观这个设施，这是一次见证奇迹的机会。
首先，超大的演示作品把我带到了一个科幻世界。我看到了一个完整的场景，有功率巨大的隐藏风扇；能够震动建筑物的扬声器，以及一系列由电脑控制的彩色照明。这是一次非常震撼的体验，它展示了一个主题公园如何能够创造出没有墙壁或等待时间的游乐旅程。最重要的是，这一切是发生在精心布置的舞台之中，现实世界的道具充斥着周围的地面和墙壁。尽管尚不能与现实融为一体，但已经非常接近。我看着周围的物质世界，这种创造物不是像某种动画贴纸一样叠加在于其上，而是融入其中，这令我非常吃惊。
然后，我们回到大楼之中，来到了一个装饰成客厅空间的巨大房间，里面配有沙发，桌子，小摆设和地毯。这个演示区同时让我有机会尝试了六种不同类型的演示。首先是一个Gimbal，这个漂浮着的机器人在我眼睛和远方的墙壁之间盘旋。我环绕着它行走，从不同的角度观察，而它依然能够静静地徘徊在我的视场之中。周围的世界依然存在，但我无法透过它看到另一边的事物，就好像它有实体，有内在，根本不是一个平面图像。我惊讶地发现，我越接近机器人，它在一定程度上就变得越详细。即便我靠近浮动的对象，我仍然没有看到像素化的现象，同时我可以观察到无法从远处看到的细节。然而，如果我过于靠近，这就会消失，或者我突然之间发现自己身处在这个东西的里面。他们告诉我，他们尚未对演示作品进行打磨。我还注意到，随着我环绕着它行走，呼呼的机器人同时会转身，无论我站在哪里，它的声音总之从同一个位置传来。
接下来，系统工程部门的高级总监萨姆·米勒（Sam Miller）和资深技术市场经理莎娜·迪·露莉丝（Shanna de Luliis）向我介绍了在我的世界中启动三个屏幕（主要是电脑显示器）的过程。它们看起来像是大而平坦的电视屏幕或电脑显示器。更重要的是，它们保持静止不动。所以，我可以随意安放它们，甚至创建出一个我所熟悉的多显示屏设置阵列。在这种情况下，我面前摆放着三个屏幕，而每一个屏幕都足够大，如果要查看其中的内容，这时我则需要转过头来。另外，那个机器人依然徘徊在一边。
在这之后，我尝试了一个关于浮动四方电视的演示作品，每一面都播放着实时电视内容。你可以环绕对象行走，观看不同的频道。无论我是否在看着它们，所有的频道都会一直播放。
有一次，房间里的一道墙突然发出了一道白色的光线，照亮出门的轮廓。然后门打开了，一位女人走了进来。
她向我走来，在数英尺远的地方停了下来。细节的程度令人印象深刻，但我不会将她误认为是一个真实存在的人类，她的荧光，她的设计“出卖了”她。尽管她没有对我所说的话作出反应，但她有能力这样做。事实上，米勒将她设置成手动控制，并在她的脸上展示一系列的情绪：微笑，愤怒，厌恶。我注意到，当我移动或环顾四周的时候，她的眼睛会一直盯着我。Lightwear内部的摄像头在馈送她的数据，从而可以保持彼此眼神接触。这有点让人不安，我最终打破了我们之间的眼神接触，避免自己显得不够礼貌。
在未来，这种虚拟人类可以由Apple Siri, Amazon Alexa和OK Google构建，但她不会只是一种无实体的声音，她可以跟着你，看着你，为你提供基于AI的具身辅助。
演示像是一个奇怪的概念集合。就像巨大的漫画一样，你可以走进其中，并像是透过窗户一样感知其中的内容。
在今年早些时候，我与Madefire的成员交谈了一番，这是一家正在努力让漫画阅读体验变得更加逼真的企业。在佛罗里达，我看到了他们技术的效果，而漫画内容具备令人惊讶的实体性。漫画的页面飘浮在咖啡桌上，我可以看出一些面板漂浮在不同的深度。当我走近它们的时候，我可以在瞄向一端并看到平面图漂浮在空间之中，或者我可以从不同角度来观看艺术品，比如说欣赏挂在墙上的一幅画。当时正在发生一场风暴，漫画周围的空气充斥着雨声和雷声。这是一种微妙但强大的感觉，我可以进一步沉浸在体验之中。
在另一个例子中，他们向我展示了一个名为体积捕获的快速演示。团队前往了一些捕捉工作室，让里面的工作人员用特殊设备捕捉演员的真人表演。接下来，他们把这个演员输入至系统之中，而他们基本上可以将这种真人表演呈现在用户所身处的任意房间。尽管部分细节有点粗糙（比如鼻子和嘴唇之间的空间有点过于圆滑），但给人的整体印象就像是近距离观看现场表演，并且能够环绕其走动一样。我无法描述捕捉的内容，只能说即便演员在快速运动，我的视图也能够跟上。即使我在表演中走来走去，视图也不会出现停顿或减缓。Magic Leap的工作人员告诉我，表演可以变大，或者是变小，从而可以在我的手掌之上进行。
2. 光场
阿伯维茨说：“我将其叫做‘行业的蟑螂’，因为它永远死不了，它只需要停下来修整一番即可继续上路。”在他的办公室里，阿伯维茨通过显示器向我展示了十九世纪三十年代的立体镜形象。立体镜可以拍摄同一事物的两张图片（每张照片的角度略有不同），然后置放于离眼睛有一定距离的地方。你把设备穿戴在眼睛上（它有一块木头挡住眼睛，不要其看到除图片以外的事物），并盯着两张照片。结果是一种类似于3D的效果。对于这项已经完成使命技术而言，阿伯维茨的描述更加专业。他说：“这会引起视觉辐辏调节冲突，所以你的眼睛不能正常工作。如果是以这种不自然的方式来观察这两幅图像，你会创建出这种不自然的3D图像。”
现在有关3D的一切似乎都来自于这种十九世纪三十年代的技术。阿伯维茨说道：“这对我来说有点令人不安。从19世纪开始，它就不断重现。它出现在电影院的红蓝眼镜里。它出现在了六十年代，到了二十一世纪它仍然存在。当VR再次出现的时候，感觉就像是同一样东西。这就像是我们仍然在沿用相同的概念。”
十九世纪三十年代的技术采用两张平面图像，而虚拟现实则基本上是使用两块屏幕。阿伯维茨认为我们必须采用更好的办法。这并不是说他想要改善虚拟现实，他希望探索出一种更好的方法来创建可以融入至人们对真实世界感知的影像。他对混合现实更感兴趣。对于虚拟现实，其可以再现你所看到的一切；对于增强现实，其可以将图像注入至你的世界；对于混合现实，其可以将影像添加到现实世界，而这种影像同时可以感知到你和你所居住的世界。比如说，MR马匹可以知道你的沙发在哪里，并且不会穿过你卧室的墙壁。
随着阿伯维茨开始研究我们是如何“陷入这糟糕的境地之中，以及出路在哪里”的问题，他发现混合现实世界和感知世界发生了两件他有兴趣研究的事情。
第一个是所谓的模拟光场信号。光场基本上是指从所有物体反弹回来的一切光。当你拍摄一张照片的时候，其实你是在拍摄一小片光场。然而，眼睛可以看到更多的光场，使得我们能够感知深度，运动和许多其他视觉的微妙之处。阿伯维茨希望知道的另一件事情是，光场信号是如何通过眼睛进入你的大脑，进入视觉皮层。“你所感知的世界实际上是建立在你的视觉皮层之上，”他如是说道，“你的视觉皮层和大脑的一大部分就像是一个渲染引擎，而你所看到的外部世界实际上正由大约100万亿个神经连接进行渲染。”
目前的科学考量是，大约有40％的神经能力用于视觉处理。当你在进行某项运动时，这个比例可以上升到70％到80％。阿伯维茨说道：“你基本上正在创造视觉世界。你实际上是使用这种我们称之为动态模拟光场信号的巨大视觉信号来共同创造视觉世界。这就是我们对宇宙中所有光子波前和粒子光场的总称。就像是一个巨大的海洋，它无处不在。这是一个无限的信号，包含了大量的信息。”
创建人工光场的问题是，我们目前难以计算如此巨大的复杂信息，更不是说要包含运动。在2011年，阿伯维茨与在加州理工学院学习理论物理学的朋友来谈论问题的解决方案。他们提出了一个概念，将人类视觉系统比作是一种过滤器。眼睛实际上没有看到任何东西，但它正在从一个巨大的光场中过滤出一束更薄的光线，然后把它送到视觉皮层。阿伯维茨表示：“这时，我们基本上是自力更生，我们与外界隔离了开来。”
他们最终得出的结论是，视觉皮层的功能很像电脑里的图形处理器。它可以利用眼睛馈送的信息，并为人们渲染一个世界。另外，它们只需要非常稀疏的数据即可做到这一点。阿伯维茨解释说：“也许我们所有人都已经在基因上遗传了世界的各个版本，我们所做的只是吸收稀疏变化的数据来更新这个模型，但我们拥有的是一个持久的模型。对于人类是怎样从我们如何生存，繁衍和搭建住所的意义所发展而来，以及我们所有的视觉空间系统似乎都是从眼球到指尖，从指尖到中场，再从中场到远场，这似乎都联系在了一起。”
这意味着当需要的时候，大脑会抓取更多的信息，并渲染更多的细节。这完全改变了阿伯维茨及其团队对光场问题的思考。他们突然想到，如果理论正确，他们实际上不需要捕捉整个光场并重新创建光场，他们只需要抓住所需的信息，并通过眼睛将其馈送到视觉皮层即可。阿伯维茨将其称为大脑的系统工程视图。他说：“我们的想法是，如果我们能够弄清楚这个信号或者它的近似值，那么把它编码成一个晶圆或许会很酷。我们可以制造一个小小的晶圆，让它将数字光场信号发射回眼睛。这是我们主要的想法。”
突然之间，阿伯维茨从试图回答问题发展至需要设计解决方案。他确信，如果他们能够创造出一种能够将所需光场部分传递给大脑的芯片，他们就可以欺骗大脑，让它认为自己所看到的数字影像是真实的对象。认识到这一点意味着他们试图摆脱显示器，并且只使用人类已有的东西。阿伯维茨说：“有两个关键的禅宗思想：‘无显示器’是最好的显示器，在外面的其实是在里面（或取自“一即是多，里即是外，有即是无，无即是有”） 。至少从我们目前看到的情况来看，它们完全真实。你认为一切在你之外的事物实际上是完全由你自己渲染，由你和你的模拟光场信号共同创造。”
“每个人都是具备固有的创造性，因为每个人都正在创造你属于自己的阿凡达世界。你生存在这个世界中，你同时在不断地创造，不断地共同创造，而这令人超级兴奋。”
对于阿伯维茨和Magic Leap而言，下一步是制作可以证明这一理论的东西。
3. 世界，你好
Magic Leap的“Hello World（世界，你好）”时刻可能对其他人并无意义，但对于四年来一直在努力证明理论的团队来说，这是一个令人欣喜的时刻。
另外，这是一个像素。
阿伯维茨说道：“当我们拥有了一个像素的时候，这可以说是我们第一个真正的时刻，但没有人会在意。我们当时正在通过摇杆来控制一个像素在房间中移动。这就像是1970年的《Pong》或其他什么（史上第一款家用游戏）。那只是一个点，而我们只是控制着它在房间中移动，但这种感觉就像，‘天呐，我们刚刚做到了吗？’。”
“The Bench
对于在2014年取得突破之前的这几年时间里，阿伯维茨将其称为“在沙漠里的漂泊”。在2013年，他们开始构建第一个工作原型。阿伯维茨向我展示了一幅图像，里面的内容是他们称之为“The Bench”的东西。我告诉他，这看起来有点像是一个巨大的蒸汽朋克断头台，但他纠正了我的说法。他说，这更像是《发条橙》中的东西。你把头固定在一台设备中，而头顶悬挂着巨大的矩形电子器件和缆线。然后你静静地坐在那里，等待团队试图用信号生成器来欺骗你的大脑。
这个过程进展缓慢，非常令人沮丧。阿伯维茨说，他经常前往小鹰号和土星5号运载火箭台寻求灵感。在当时，Magic Leap是由一群来自于美国宇航局的成员，计算机科学家，物理学家，漫画创作者所涉团队所组成。阿伯维茨指出，团队之后不断地迭代他们的想法，直到他们实现了那一个点。
这个点证明了他们的理论，而之后的创新速度变得更快。不久后，他们开始将漫画书中的角色添加至现实世界，并讨论开发一个名为《Monster Battle》的游戏。这个概念需要孩子们走进一个真正的游乐场，然后指挥巨型怪物彼此战斗。
“Cheesehead”
阿伯维茨知道他最终将会用完这笔用于创业的资金，而他必须进行外部融资。幸运的是，这个像素和这两个角色足以向谷歌和其他投资者证明，Magic Leap正朝着正确的方向前进。截至2014年底，Magic Leap成功完成了5.4亿美元的融资。
利用这笔，他们搬离了原来的单间办公室，并开始研究第一代可穿戴版本的技术（现在他们亲切地将其称之为“Cheesehead（起司头）”）。阿伯维茨表示：“这就像我们计算机视觉放到光场信号发生器之上，然后装配起来，并开始四处走动。它的重量达到几十磅。在这时，我们开始将运动和高端计算机视觉结合在一起。”
Cheesehead表明，他们能够以纳米结构的形式提取信号的关键元素，并将其放入晶圆之中，从而创建数字光场信号，帮助人们感知这个全新的混合现实世界。这个庞大而奇怪的设备也使得他们正在不断壮大的软件团队能够测试一系列的代码。
在这之后的两年时间里，团队继续迭代软件，硬件，研究和设计。为了加速生产与测试周期，他们搬到了劳德代尔堡外的一个巨大空间，并在地下建立了一个晶圆制造厂。阿伯维茨说道：“从2014年10月到2017年12月，我们开始了一次非常疯狂的冲刺。”
4. 魔法时刻
在Magic Leap庞大的“地下墓穴”中，机器人手臂和兔子般的人类正在无尘室中静静地合作，他们稳定地组装光子芯片，为Magic Leap所描述的全新现实，或者是更好的现实提供动力。阿伯维茨引着我走过一条长长的水泥走廊，并时不时地停在窗户前，然后向我讲述里面的工作。Magic Leap负责硬件和工程项目的资深副总裁保罗·格雷科（Paul Greco）解释说，整个地下层必须拆除并重建，这样他们才可以将其变成可以满足他们需要的设施。对于在厂房生产的晶圆，Magic Leap的任何人都无法向我透露太多的信息，可能是因为它们是帮助Magic Leap实现魔法的关键力量。阿伯维茨称这种小巧半透明的长方形为光子晶圆。但如果他什么都不说，我会把它们形容为某种类型的透镜。
阿伯维茨说：“在之前，我们就像是在木料间，努力开发信号的概念，然后试图发明这种信号的晶体管。我们不是用晶体管来移动电子，我们是在移动光子，一个三维纳米结构的光子信号。我们还没有取什么正式的名字，而这就是我常常说的‘海猴子’，不过，这不是我们可以使用的名字。因为我可不想让海猴子们生我们的气，所以我们要为它取一个很酷的名字。”
他说，晶圆可以在3D纳米结构中移动光子，使其能够输出非常特定的数字光场信号。那些光子晶圆最终会集成至一个更大，更圆的透镜，然后制造成一副时尚的眼镜产品。在楼上一处僻静的空间中（这里就像一个时装展示厅），我第一次观察到完整的Magic Leap硬件。Magic Leap高级副总裁盖里·夏目（Gary Natsume）表示，设备的所有元件都以类似的设计语言组合在一起。这个系统（硬件的第九代）由以下三个部分组成：一个头戴式显示器；一个由一根长缆线连接的小型豆荚状计算机；以及一个名为Control的控制器。头显看起来几乎是一副用厚厚头带固定在一起的眼镜。它们轻便，或许不是十分时尚，但足够现代，同时显然比当前的任何虚拟现实设备更加时尚。盖里·夏目说道：“透镜是一种非常具有代表性的形式。我们的目标是，它们最终能够变成眼镜一样，而我们每天都会穿戴它们。”
盖里·夏目表示，头显是通过采用“冠体颞部”设计的头带进行固定。“这是基于我们关于如何平衡头部重量的研究。要穿戴头显，用户需要用握住塑料冠体的任意一边，然后拉开。冠体将分成左件，右件和后件。这时，你可以像头带一样将其滑进头部。头显背后两端分别伸出两条缆线，并最终组合成同一条缆线。线缆的长度为4到5英尺（1.2米到1.5），用以连接Magic Leap One系统的移动计算机，亦即“Lightpack”。Lightpack由两个圆形“豆荚”组成，而中间形成了一定的空隙。盖里·夏目解释说，这样的设计是为了方便用户夹在口袋或者肩带上。
头显将提供两种尺寸，而额头垫，鼻托和太阳穴垫都可以进行定制。在产品上市的时候，Magic Leap还会专门为眼镜用户定制相应的透镜。
控制器带有圆滑的塑料感，能够舒适地握持，并设置了一系列的按钮，6自由度感知，触觉反馈和触控板。
Lightwear和Lightpack在设计上几乎就像玩具一样，不是因为它们看上去很劣质，不是这样的，而是因为它们是如此之轻，而且它们身上没有什么其他多余的东西。然而，阿伯维茨很快就指出这个小小的空间到底搭载了多少东西。他说：“这是一台独立的计算机。你可以将其比作是接近于Mac Book Pro或外星人PC的东西。它搭载了一个强大的CPU和GPU。它包含了一个驱动器，无线网络，以及一系列的电子产品，所以它就像一台折叠起来的计算机。”
然后他指着Lightwear说道：“这里还有另一台功能强大的计算机，它是一台感知世界的计算机视觉实时处理计算机，具备机器学习能力，因此可以不断了解外界的情况。所以你面前的是重量最轻的卫星工程级别设备。”
头显同时可以通过四个内置麦克风来感知用户周围的声音，并使用一个实时计算机视觉处理器，以及外部摄像头（我数过，共有6个）来实时追踪佩戴者和他们所身处的世界。内置于设备颞部的微型高端扬声器可以提供空间音效，其能够对你的动作，以及你与之交互的创作物动作做出反应。他说：“这不是一副搭载摄像头的眼镜。这就是我们所认为的空间计算。其具备有完整的感知能力。”
阿伯维茨拒绝透露头显的GPU和CPU信息，或者是其他规格，以及设备的续航能力。他指出，除了他们还在优化续航能力之外，其他信息需要稍后再公布。当我们离开的时候，我注意到一白袍盖住了一张长桌。我询问那到底是什么？阿伯维茨回答道：“下一个原型”。
5. Sigur Ros音乐和维塔机器人
随着演示结束，米勒询问道我到底在想什么。我回答说：“头显非常舒服，你几乎忘记了你正穿戴着这样一台设备；计算机附件正好装进我的口袋里，而线缆并没有妨碍我的体验；控制器感觉十分直观；声音既准确又强大。”但我在担心一件事情：视场。
跟微软的HoloLens一样（其采用不同的技术来创造混合现实），Magic Leap的Lightwear无法提供一个与眼睛相匹配的视场。相反，Magic Leap的创造物出现在一个大致为矩形的视场中。因为视图在空间中漂浮，所以我无法进行“测量”，但我做了第二件事情：我举起一张信用卡，然后用手试着描述这个无形框架的大小。但信用卡太小，所以我最终得出了这样的结论：观影空间大约是手臂伸出一半，然后拿着一个VHS磁带。Magic Leap产品的视场比HoloLens要大（签过NDA的体验者向映维网表示FOV大概在45～50度左右），但这个框框仍然存在。
米勒说：“我可以肯定，未来的硬件可以显著扩大视场。所以你在这些设备上所看到视场是即将发货时的视场大小，但对于未来的产品，视场将会变得显著更大。我们已经在实验室中开展相应的项目。”
迪·露莉丝补充说，开发者可以选择淡化边缘，这样就能避免图像停止，“而你的大脑会自然而然地填补你的空白”。
米勒希望向我展示另一项巧妙的技术。他走到房间的尽头，然后让我启动Gimbal。这时，机器人乖乖地出现在远处，就漂浮在米勒的旁边。米勒随后走进机器人的空间中，这时他突然消失了。当然，只是大部分消失而已，我仍然可以看到米勒的双腿出现在机器人的下方。
我的第一反应是：“本来就应该如此。”但我后来意识到，Magic Leap的技术实际上是令数字对象完全遮挡住现实世界的人类。我的眼睛看到了同一地方存在着两个事物，并判断创造物属于真实，而忽略了米勒的存在，至少这是阿伯维茨后来给我的解释。
最后，我进入了一个单独的房间，而Magic Leap允许我详细谈论这里的演示作品。冰岛摇滚乐团Sigur Rós过去一直在与Magic Leap合作，共同研发一种他们喜欢称之为“音景”的体验。对于这个特别的演示，工作人员让我戴了耳塞。项目的技术负责人麦克·塔克（Mike Turker）告诉我说：“你将要看到的是一个名为“Tonandi”的体验，你看到的不是一段录制音乐，而是一段交互式音景。他们喜欢这样来描述它（音景）。”
“Tonandi”首先创建了一圈飘逸超凡的树木，然后静待你的下一步动作。在里面，在我周围漂浮的烟雾在空中翩翩起舞。当我向它们挥手的时候，它们创造出一种哼唱之音，它们或会消失于黑暗之中，又或会环绕我轻舞转动。随着时间的推移，不同类型的创作物将会出现，我触摸它们，向它们挥手，轻触它们，期待看到不同的交互可以带来怎样的音乐。很快，豆荚就从地毯和咖啡桌上的长茎和草地上冒出头来。豆荚像花蕾一样张开，我发现魔鬼鱼般的创造物会在我周围漂浮，而且它们会发出五光十色的光彩。我的动作不仅只是可以改变在我周围展开的口袋世界，它可以让我参与至音乐创作之中，我可以结合我的动作和Sigur Rós 的声音来创造我所聆听到的音乐。
体验“Tonandi”十分轻松，任何人都可以尝试这种超逼真，魔幻现实主义的音乐创作。然而，这一切的背后其实正在发生一系列的事情。塔克表示，这个项目采用了大量集成至Magic Leap设备的技术。他说：“我们采用了大批独特于Magic Leap的功能。我们采用了房间映射，我们使用了眼动追踪，而你可以在大部分体验中使用手势，使用我们的输入系统。”
后面我们在会议室中吃午餐。阿伯维茨说，他们的团队曾经实验过一种恐怖体验。他指出：“那非常吓人。大家都不敢再进去那个房间。这真的非常，非常恐怖，几乎就像是性命攸关的恐怖。所以我们说，‘好吧，我们先暂时搁置这个项目。’”
这里还有很多事情可以看，可以做，但Magic Leap给我的时间有限。我希望尝试的一个体验是基于维塔工作室（Weta Workshop）所开发的技术（为《指环王》，《银翼杀手：2049》和《雷神3：诸神黄昏》等电影制作特效和道具的工作室）。
这款游戏最初由维塔新成立的维塔游戏工作室（Weta Gameshop）所开发，主要是围绕“Dr. Grordbort（葛保诺博士）”的宇宙所设计。“Dr. Grordbort（葛保诺博士）”是由概念设计师格雷格·布罗德莫尔（Greg Broadmore）所设计的奇幻宇宙，并为维塔联合创始人理查德·泰勒（Richard Taylor）和塔尼亚·罗杰（Tania Rodger）共同拥有。维塔游戏工作室现有大约55名员工，皆由布罗德莫尔领导。泰勒表示:“我们已经为此研究了大约5年的时间。我们一直在开发与Magic Leap硬件和软件直接相关的游戏。”
这是一款设置在葛保诺博士世界中的第一人称射击游戏，泰勒相信作品将随着Magic Leap的上市而与大家见面。在游戏故事中，一个机器人星球发现了通往地球的传送门，然后其中的机器人计划侵略地球。玩家需要阻止机器人通过传送门，并且使用系统的控制器来进行攻击（控制器在游戏时就像是一支镭射枪）。泰勒说：“当你进入游戏的时候，传送门将会在客厅墙壁或卧室墙壁开启，你可以通过传送门看到这个机器人星球。一开始将十分平静，但在葛保诺博士与你交谈一番后，潘多拉之盒将会打开。这是世界上最为疯狂的体验。”
6. 持续的现实
对于Magic Leap这项数十亿美元价值的技术，其看上去是如此的毫不费力，我们很容易就会低估它。在一定程度上，这是技术的一个关键创新。
阿伯维茨及其团队希望解决的一个根本性问题是，在使用虚拟现实头显和长时间使用屏幕时所出现的变形问题。他告诉我说：“所以我们的目标是，最终将特殊的信息处理集成至世界上大多数人都可以每天使用，整天使用，随时随地使用的东西之中。这是一个雄心勃勃的目标，而我们需要时间才能实现。但要实现全天使用，一部分关键要素是轻便和舒适。它需要适合你，就像是需要适合你的袜子和鞋子一样。它需要精细的优化来适配你的面部，适配你的身体。我认为对于全天使用而言，一个根本性组成要素是信号和你需要非常匹配。”
阿伯维茨指出，寻找一种重新创造光场的方法意味着，这个结果是一种自然而舒适的观影体验。他解释说，这是Magic Leap的努力所依赖的基石。他说:“你永远都不希望再去想它。你只是想确定我们已经解决了这个问题，而我们认为这是重要的第一步。”
虽然技术的基础问题可能已经得到了解决，但当我提起视场问题时，阿伯维茨承认体验的实现尚不完美。他解释道，Magic Leap仍然在优化这一方面。他说：“我们认为，视场问题是可以解决的，而且对ML1（Magic Leap One）来说已经足够好。视场问题是我们将在Magic Leap 2和3，以及以后版本所需要迭代的事情之一。当你解决了形状因子和视场问题时，你就差不多算是完成了。”
阿伯维茨并没有明确回答我提出的另一个关键问题：实现多个焦点的能力。在理论上，一个光场应该可以允许你略过一个数字影像并看到其背后的现实，而更靠近于你的影像则会出现一定的焦点模糊。对于我尝试的体验，我都没有机会观察头显是否能正确地实现这一点。所以我询问他们设备能否支持多个焦平面。阿伯维茨在随后的邮件中写道：“Magic Leap的Lightwear采用了我们专有的Digital Lightfield（数字光场）技术，而这是模拟光场信号的数字版本。开发者可以使用在空间中正确呈现的角色和对象来创建应用程序和体验，并允许用户自然地关注感兴趣的对象，就像是在现实世界中那样。”
当我再次询问阿伯维茨并希望他提供一个更清晰的答案时，阿伯维茨婉言拒绝了我，他表示这是为了保护专有信息。
阿伯维茨认为第一代硬件是好的产品，是可行的产品，而这解释了为什么他们要将其称为“Magic Leap One：Creator Edition（创作者版本）”。对Magic Leap而言，创作者包含开发者，品牌，机构，以及早期采用者。阿伯维茨指出，这相当于“购买了第一代Mac或第一代PC的消费者。任何购买了第一代iPod的人群。是这么一群人。但这并不是开发套件。如果你是一名消费者型的创造者，设备会令你感到满意。”
阿伯维茨没有透露具体的发货日期或定价，但他表示第一代产品将于2018年发货。至于成本，他回答说：“我们内部已经制定了一个价格，但我们暂时不会公开。预购和定价信息将会一同公布。我会说，我们的产品更像是一个高端计算系统，更像是一台高端手工计算机。”
尽管他们没有回答一系列的关键问题，但能够踏足于Magic Leap的走廊和小道让我对这家公司的发展方向有了更清晰的认识。这不仅只是头显，或者说驱动头显的光场技术。对于即将为世界带来他们系统的Magic Leap而言，他们正在为设备整合一系列的技术，而这将有一天会改变我们与一切技术交互的方式。
光场光子可以在真实自然光现实中呈现一个假现实，而这可能是显示器中最明显的创新，但Magic Leap的创新还有更多。视觉感知系统可以追踪你周围的世界，判断诸如平坦的表面，墙壁和物体等事物。其结果是一个见你所见的系统，不仅能够支持光场对象存在于物理世界，同时能够与之进行实际交互。无论位于电脑显示屏旁边的虚拟显示器，还是躺卧在客厅沙发上的虚拟熊猫，基于机器学习的视觉感知都可以释放空间计算的力量；设备同时采用了房间映射功能，能够追踪你放置在世界的数字对象，这样即便你离开再回来，数字对象仍然会维持在原位。将六台显示器排列在桌子上方，然后上床睡觉，第二天它们仍然会维持在那里。虽然我们不知道内置在Lightpack中的微型计算机的规格，但我们知道它能够运行可以感知世界和做出反应的游戏。Control是与系统交互的直接方式，但你同时可以使用Magic Leap的姿势追踪（不仅可以识别你的手部和手指，同时可以识别你的头部位置），语音，眼动追踪和其他进行交互。最后，Magic Leap的技术不仅提供了一个光场，而且提供了一个声场。他们的声场技术可以追踪你的动作并作出反应，确保音频始终来自于特定的对象。这种技术甚至可以传递距离和强度。对于所有这一切，它们只是用来创建Magic Leap One及其Lightwear，Lightpack和Control基线的硬件和软件。在2018年年初，Magic Leap计划开启一个创作者门户，这样大家就可以访问他们的软件开发工具包。在那个时候，不仅只有Magic Leap及其合作伙伴（如维塔，Sigur Rós，工业光魔和Twillo等等）能够开发新体验，我们每一个人都可以设想未来，创造未来。
随着事情已经接近尾声，Magic Leap的团队和我再次来到了阿伯维茨的办公室，因为我要跟他说再见。阿伯维茨坚持把我送到入口处。在经过Magic Leap一个洞穴般的空间时，阿伯维茨停了下来。墙上挂着一幅画作。这是西班牙超现实主义绘画大师萨尔瓦多·达利的作品，名为“Spectacles with Holograms and Computers for Seeing Imagined Objects”。阿伯维茨表示，他认为这代表了Magic Leap在重建光场方面所做的一切。阿伯维茨用手指描述了相似之处，画作下方的数学式涂鸦，眼镜，视场的描述，以及似乎是点亮的视觉皮层。
在我眼中，我看到的是视觉皮层和大脑正在吸收和处理外部图像。但阿伯维茨却看到了相反的情况：计算机生成的图像正在注入大脑，然后再投射到用户的世界。
这是达利眼中的Magic Leap，这是超现实主义者眼中的魔幻现实主义。
