ARKit 6正式发布,开始支持4K增强现实视频录制
ARKit 6
(映维网Nweon 2022年06月07日)今晨举行的WWDC大会正式带来了ARKit 6。这个AR套件增加了非常适合专业视频编辑、电影制作、社交媒体应用等的4K视频功能。另外,它支持HDR视频和高分辨率背景图像捕获,扩展了视频和捕获功能,为蒙特利尔、悉尼、新加坡和东京等新城市带来了Location Anchors定位锚,并对Motion Capture进行了优化。
1. 4K 视频
ARKit 6允许你在ARKit会话期间通过后置摄像头捕获4K视频。4K视频非常适合于将虚拟内容和真实内容集成在一起的应用程序,如社交媒体、专业视频编辑和电影制作等等。
需要iPhone 11或以上;又或者是iPad Pro(第5代)。
2. Depth API
LiDAR激光雷达扫描仪内置的高级场景理解功能允许这个API利用有关周围环境的每像素深度信息。当与场景几何体生成的三维网格数据相结合时,深度信息可以支持虚拟对象的即时放置,并将其与物理环境无缝融合,从而提升虚拟对象遮挡的逼真感。这可以开启应用程序中的新功能,例如进行更精确的测量,并将效果应用到用户的环境中。
Depth API和Instant AR特定支持配备激光雷达扫描仪的设备:iPad Pro 11英寸(第二代)、iPad Pro 12.9英寸(第四代)、iPhone 12 Pro、iPhone 12 Pro Max。
3. Instant AR
LiDAR激光雷达扫描仪可以实现快速的平面检测,你无需扫描即可在真实世界中即时放置AR对象。对于利用ARKit构建的所有应用程序,iPhone 12 Pro、iPhone 12 Pro Max和iPad Pro会自动启用即时AR放置,无需任何代码更改。
Depth API和Instant AR特定支持配备激光雷达扫描仪的设备:iPad Pro 11英寸(第二代)、iPad Pro 12.9英寸(第四代)、iPhone 12 Pro、iPhone 12 Pro Max。
4. Motion Capture
你可以通过单个摄像头实时捕捉人体运动。通过将身体位置和运动理解为一系列的关节和骨骼,你可以将运动和姿势作为AR体验的输入,并将人体置于AR的中心。在所有利用ARKit构建的应用程序中,iPhone 12、iPhone 12 Pro和iPad Pro都可以改进身高估计,无需任何代码更改。
5. 前后摄像头同步
前后摄像头同步启用面部追踪和世界追踪可以开辟全新的可能性。例如,用户可以仅使用自己的面容来与后摄像头视图中的AR内容进行交互。
6. 图像和视频捕获改进
利用ARKit 6,你可以在ARKit会话期间捕获高分辨率背景图像。对于实现更高质量的虚拟对象重建,以及希望引导用户获得完美拍摄并同时最大限度提高最终图像质量的摄影应用而言,这显然非常有用。ARKit 6同时增加了对HDR视频的支持,并在每个ARKit帧中添加了EXIF标记,如曝光和白平衡。现在,你可以在ARKit会话期间直接控制摄像头的曝光、白平衡和焦距。
7. Scene Geometry场景几何
创建空间拓扑图,并使用标签标识地板、墙、天花板、窗、门和座椅。这种对真实世界的深入理解为虚拟对象解锁了对象遮挡和真实世界物理,同时为你提供了更多信息来支持AR工作流程。
8. 人物遮挡
AR内容能够真实地出现在人的后面和前面将能提升AR体验的沉浸感,同时可以在几乎所有环境中实现绿幕风格的效果。在使用ARKit构建的所有应用程序中,iPhone 12、iPhone 12 Pro和iPad Pro端的深度估计都有所优化,无需任何代码更改。
9. 其他改进
运动捕捉现在包括对左右耳的追踪,并改进了整体身体姿势检测。一次最多检测100个图像,并自动估计图像中对象的物理大小。由于在复杂环境中可以更好地识别对象,因此三维对象检测更加稳健。
另外,已为蒙特利尔、悉尼、新加坡和东京等新城市带来了Location Anchors定位锚