Facebook制作《头号玩家》AR海报,展示AR目标追踪技术,计划春季开放SDK
文章相关引用及参考:fb
只需简单地将手机摄像头指向海报,电影中的角色即可变得生动起来
(映维网 2018年04月09日)想象一下,走在街上的你看到一张自己喜欢的电影的电影海报,这时只需简单地将手机摄像头指向海报,电影中的角色即可变得生动起来,并立即将你沉浸在AR体验之中。
AR目标追踪是Facebook AR平台革命的一个里程碑。Facebook的AR Target Tracker效果使得品牌商,发行商,艺术工作者和开发者能够创建与图片,标志,图标相关的情景内容。这项专为Facebook Camera设计的技术旨在支持摄像头追踪图像并启动一款沉浸式体验。AR可以瞄定在任意表面,并显示透过Facebook Camera的叠加层。
电影《时间的皱折》和《头号玩家》已经在封闭内测中采用了Facebook AR Target Tracking技术来创建相关的沉浸式体验,以这种全新的方式来吸引粉丝。用户已经可以通过全球任何一张电影海报来尝试体验。另据映维网了解,Facebook目前正在准备开发套件,并计划在春季推出。
1. 从瞬时性到持续性
Facebook在2017年12月推出了AR Studio,帮助创作者构建支持用户在环境中放置3D对象和实时与之交互的效果。这种短暂的面罩允许你在任意表面放置AR对象,然后与之交互或进行分享。但Facebook希望更进一步,并围绕持续性AR体验探索不同的用例。AR Target Tracking正是Facebook对这种持续性AR体验的首次实例化。
Facebook首先把目光放在了2D曲面目标身上,因为它们无处不在。例如,电影海报存在于世界各地。由于AR与海报相关,所以用户可以享受相同的体验。这允许开发者超越时间与空间,并为Facebook社区提供一致的体验。
2. 关注质量与可达性
尽管其他厂商已经开发了类似的技术,但Facebook的技术存在两个与众不同的地方。Facebook的目标是为尽可能多的用户提供最高质量的技术,最大化技术的覆盖面。这样,即便你是iPhone 5s或2012年安卓设备的用户都能体验这项技术。Facebook已经能够为旧款的低端手机提供这种体验,以确保不排除任何市场的用户。为了做到这一点,Facebook投入了大量资源来优化追踪算法,以便其能够支持低端的设备。
Facebook同时希望维持AR体验的最高质量。为此,Facebook在不同的照明条件下测试了算法,如在夜晚,通过不同的角度,以及部分遮挡。
3. 制作AR Target Tracker效果
如果要为电影海报制作AR Target Tracker效果,你需要首先向AR Studio上传电影海报的图片,然后创建并上传旨在嵌入电影海报的特定AR艺术体验。在完成后,用户只需打开Facebook Camera并对准海报即可。当系统检测到海报时,这将触发相关的AR体验。用户同时可以通过其他机制来触发效果,如预编程的二维码。
4. 工作原理
上传至AR Studio的电影海报或图片将形成一张模板图像,然后通过比较摄像头的视频帧来识别海报。Facebook的技术将分析模板海报,并寻找唯一可识别的底层视觉特征,然后使用图像匹配和验证管道将其与不同条件下的特征进行比较。这一过程将搜索海报的唯一可识别部分,如角点或纹理图案。接下来,Facebook从这些位置提取补丁,并且使用预先训练的编码过程将补丁编码成特征描述符向量。在下一步中,系统将量化这些向量,并将其存储在高效的索引以实现快速查找与匹配。
这一算法的关键在于,Facebook可以出色地匹配上传的内容,以便用户可以立即身处于体验之中。这时,算法将切换至追踪电影海报。随着用户移动手机,系统将确保不会丢失追踪,以及用户可以持续浏览AR内容(即便内容被部分遮挡,比如有人走过)。为了做到这一点,Facebook利用了Viper追踪器。Facebook的方法能够利用高度优化的算法来检测和追踪海报外的支持结构,而且其速度之快足以兼容低端的智能手机。
5. 带来的机遇
这一全新的目标追踪功能为企业提供了一种通过沉浸式AR体验来连接消费者的新方式。从免费的爆米花,到寻宝游戏,再到免费电影票,电影海报可以变成任何种类的推广信息。餐厅和商店可以创建与店面相关的沉浸式与娱乐性AR体验,从而吸引顾客上门。另外,创建独特AR游戏的机遇将能使用户踏上一场以前无法想象的冒险。Facebook表示,他们十分期待创作者和企业将如何利用他们的AR平台来为市场带来惊喜。