微软为HoloLens全息视频提出二次投影技术,改善流式传输带宽和质量

VR
2019
03/15
20:53
映维网
分享
评论

如果有关注与VR相关的技术文章,你可能曾多次见过“二次投影(reprojection)”这个术语,如交错二次投影或异步二次投影。二次投影是为了解决VR游戏的苛刻性能要求,旨在填补无法及时渲染的帧。比方说一款游戏不能达到标准的90fps,这时交错二次投影将“强迫”其降至45fps,并在这基础下每隔一帧进行一次重新投影,从而实现90fps的帧率。作为交错二次投影的升级版,异步二次投影则是智能地插入一帧,从而有效减少画面抖动并使得体验更为流畅自然。

现根据微软的一份最新专利,这家科技巨头似乎有意为全息视频采用类似的二次投影技术,以改善流式传输的带宽/质量。

发明文件显示,诸如HoloLens这样的MR头显在视频压缩和传输实况视频方面存在一定的挑战,如带宽。另外,一系列现有的视频压缩技术都依赖于这样一个概念:连续视频帧的大部分背景从一个视频帧到下一个视频帧时保持相对静态,因此只有实际变化的像素需要传输。但对于头戴式显示器,头部移动可导致图像数据(包括背景)中更频繁和更大幅度的变化,这降低了已知视频压缩技术的有效性。

因此,MR头显需要一种可以减少带宽要求和/或提升分辨率的技术,亦即微软在名为“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality(二次投影全息视频以改善流式传输带宽/质量)”的发明文件中所描述的技术。

具体来说,微软描述的技术适用于具有摄像头和深度传感器的全息设备。在将数据传递到计算P帧(或B帧)的视频压缩器之前,流式传输应用程序执行应用于先前帧的图像扭曲3D变换。系统将利用camera的已知3D位置和camera前面的3D几何形状,并基于camera的当前位置重新投影前一帧,而不是花费时间和资源来完全重新渲染一帧,从而减少发送流式视频的数据带宽。

相关专利:Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality

尽管这只是一份专利,但考虑到“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality(二次投影全息视频以改善流式传输带宽/质量)”是于2017年1月提交,所以如果马上就要在MWC大会亮相的HoloLens 2搭载了这项技术,我们将不会感到惊讶。

原文链接:https://yivian.com/news/57048.html

来源:映维网

THE END
广告、内容合作请点击这里 寻求合作
VR
免责声明:本文系转载,版权归原作者所有;旨在传递信息,不代表环球360的观点和立场。

相关热点

根据美国专利商标局公布的最新专利,除了VR游戏和其他形式的娱乐,苹果的工程团队认为混合现实头显可以结合VR键盘和文字处理器结合使用,而这帮助我们睹见了未来的头显用例...
VR
微软日前宣布,他们将把可变速率着色(Variable Rate Shading;VRS)带到DirectX 12。这家公司表示,开发者可以利用VRS来提升应用程序的性能,增加图形质量,并降低系统要求。...
VR
英伟达的3D眼镜即将成为历史。随着VR和AR头显的兴起,用于游戏的“3D Vision”立体3D眼镜逐渐淡出了人们的视野。英伟达最初开发这款设备的目的是,为游戏体验带来三维元素...
VR
OptiTrack的追踪技术正广泛用于全球各地的的VR线下娱乐中心,而这家公司于GDC 2019大会展示了他们最新的技术。...
VR
Ramirent现在以其新的数字平台Ramirent TwinsiteTM进入VR领域。一个全面运作的虚拟建筑工地,将VR技术用于培训和通信,以提高安全性、可持续性和效率。...
VR

相关推荐

1
3