雨果巴拉:行业北极星Vision Pro过度设计不适合市场

苹果申请新VR专利,可用于VR摄影和后期制作

文章相关引用及参考:patentlyapple

其涉及可用于移动或头戴式显示器虚拟现实应用程序的单视场(1个视图)或立体视场(2个视图)180度或360度摄影和后期制作。

Vision Pro QQ群交流653565822

映维网 2017年10月13日苹果CEO在接受英国《独立报》采访时表示增强现实眼镜的技术尚未成熟。AR眼镜是一种不同与VR的技术,我们不应该将其与虚拟现实头显相混淆。苹果在今年年初已经聘请了著名的增强现实领域专家杰夫·诺里斯(Jeff Norris),而后者曾在NASA喷气推进实验室负责过虚拟现实和增强现实项目。他的团队与FacebookOculus(虚拟现实),微软HoloLens(混合现实)和HTC Vive有合作关系。苹果表示,新的iMacs有能力为3D VR头显创建尖端的VR内容。

今天,美国专利及商标局公布了一项苹果专利,其涉及圆顶,移动或头戴式显示器虚拟现实应用程序的单视场(1个视图)或立体视场(2个视图)180度或360度摄影和后期制作。

传统的180度或360度视频和/或图像主要以平面存储格式进行储存,而这种格式是通过等角或立方投影来表示球面空间。如果这在常规编辑或图形应用中编辑这种视频和/或图像,当视频或图像在头显中以圆顶投影,立方或球形分布并呈现时,用户将难以解释最终结果的体验。在平面投影中编辑和操作这种图像需要特殊的技能和反复摸索。

此外,在操作通过球面合成或编辑的图像或视频后,一般难以发现后续拍摄未对准,或立体视差点没有以自然的方式相匹配。

苹果的发明涉及一种方法和系统,其可以把来自主机编辑或视觉效果软件程序的单视场或立体视场180度或360度静止或视频图像作为等角投影或其他球面投影传输到可以同时运行软件程序的相同设备的输入中,而且这台相同设备可以连续地从通过有线或无线连接的头显的方向传感器中获取方向和位置数据,并同时把该方向的代表性单视场或立体视场视图实时渲染至头显。

苹果在一个实施例中描述了用于呈现图像预览的方法。该方法包括从GPU缓冲器接收图像数据(其中GPU缓冲器与媒体操作应用相关联);获得显示设备的方向数据;使用图像数据和方位数据渲染预览图像;以及通过显示设备显示预览图像(其中,当图像数据被媒体操作应用程序修改时,预览图像将被显示;当图像数据被媒体操作应用修改时,预览图像将会被动态地修改)。

图5说明了一台3D显示设备呈现预览图像的例子,其中包含视频或图像编辑或图形操作软件程序的用户界面#501,显示在画布中的等角投影图像#502,以及合成或编辑时间线#503。

视频或图像编辑或图像操作软件程序的图像输出可以通过视频输出处理软件插件模块#504输出,并被传送到GPU图像缓冲器共享存储器,然后有效地传送至头显处理程序#506中的图像接收器#507。

头显处理程序的3D图像处理例程#508将在所述球体或立方体的中心处通过一个3D视点纹理化虚拟球体或立方体的内部。左眼和右眼中的每一个虚拟视图将相应地根据透镜/显示器规格进行裁剪,复制(如有需要),变形和定向,并且接收通过有线或无线连接的头显#510的方向传感器数据的方向数据#509。一旦3D图像处理例程渲染好准备的图像,则可以把图像传输到连接的头显,从而立即向头显用户呈现。

另外,由于头显将遮蔽佩戴者观察视频或图像编辑或图形处理软件程序的UI视图,所以也可以使用屏幕图像捕获软件模块#512把计算机显示器的用户界面捕获为图像,并将其传输到图像接收器/处理器#513进行缩放裁剪,然后在3D图像处理例程#508,#514,#515中的左眼和右眼渲染器进行合成,接下来合成图像可以传输到头显#511并立即向用户呈现。

此外,可以在计算机显示器上的窗口#516中显示多余视图,这样其他人就可以看到头显用户所看到的内容,或者判断头显是否正常运行。

根据一个或多个实施例,该系统和/或方法的优点包括显著减少对准,操作或编辑球面360度视频或图像所需的时间。尽管本发明的实施例主要是通过图像数据进行说明,但本发明的实施例也适用于音频数据。

图2中的层次图说明了常见的计算软件体系结构。与硬件示例一样,这里讨论的软件架构并非固定和独有,仅仅只是作为说明性内容。这对图2中的层次图而言尤为如此,因为软件开发者倾向于以不同的方式进行说明。

苹果在专利申请中指出:“可能有必要注意的是,Metal#252代表了苹果发布的框架/库,而本技术领域的开发者已知悉了解。此外,OpenGL#251可能代表苹果目前或以前发行的软件版本中的框架/库。”

苹果进一步指出:“Sprite Kit#261是由苹果提供的图形渲染和动画基础设施。Sprite Kit可用于动画纹理图像或‘sprites’。Scene Kit#262是来自苹果的3D渲染框架,支持比具备类似功能框架(如OpenGL)更高级别的3D asset导入,操作和渲染。Core Animation#263是苹果提供的图形渲染和动画基础设施。Core Animation可用于动画视图和其他视觉元素。Core Graphics#264是苹果的二维绘制引擎。Core Graphics#265为应用程序提供2D渲染。

在图1中,电子设备#100可能是多功能设备中的一部分,比如说移动手机,笔记本电脑,平板电脑,个人数字助理,便携式音乐/视频播放器,或者其他类似的电子设备。根据一个或多个实施例,电子设备可以通过有线或无线的方式耦合到3D显示系统#160。

图3中的流程图说明了一种通过3D显示设备呈现预览图像的方法。

专利20170295361于2017年Q2季度申请。由于这只是一份专利申请,所以目前不清楚类似产品是否/将于何时上市。

本文链接https://news.nweon.com/36763
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯