雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

Meta专利分享Quest用机器学习实现低分辨率编码传输,高分辨率解码显示

查看引用/信息源请点击:映维网

视频流

映维网 2021年12月28日)由于渲染图像和传输图像地成本与图像分辨率息息相关,所以为了节省成本,诸如Meta,苹果微软等厂商已经进行过一系列的探索。日前,美国专利商标局又公布了一份与所述主题相关的Meta专利申请。其中,名为“Enhancing the resolution of a video stream”的发明主要介绍了一种的优化视频传输分辨率的方法。更具体地说,在向用户显示图像之前,可以利用机器学习模型以较低分辨率处理图像并进行传输,然后再upsample至较高分辨率。

在一个实施例中,计算设备可以访问对应于视频帧的第一分辨率图像。计算设备可以基于视频中第一帧的第一分辨率图像和视频中第二帧的第一分辨率图像来计算第一运动矢量,其中第一帧在视频中第二帧之前。

计算设备可以通过使用第一运动向量来扭曲与第一帧相关联的第二分辨率重建图像,以生成与第二帧相关联的第二分辨率扭曲图像,其中第二分辨率可以高于第一分辨率。

接下来,计算设备可以基于与第二帧相关联的第一分辨率图像生成与第二帧相关联的第二分辨率中间图像。为了生成与第二帧相关联的第二分辨率中间图像,计算设备可以将与第二帧相关联的第一分辨率图像的像素均匀地放置到用于第二分辨率中间图像的第二分辨率图像平面中,并使得多个像素留空。计算设备可以用非空相邻像素的插值来填充第二分辨率图像平面中的多个空白像素。

......(全文 3817 字,剩余 3304 字)

映维网会员请登录SCC板块阅读完整文章
PICO、大朋等公司员工可联系映维网免费获取权限

本文链接https://news.nweon.com/92957
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯