Lytro的六自由度光场视频是虚拟现实的未来

0

在2015年年底的时候,光场相机公司 Lytro 宣布了“Immerge”光场摄像机并正式进军 VR 行业,这部光场相机是为了录制能让人在里面自由移动的视频而制作的。现在,Lytro 马上就要为大家展示他们通过这架摄像机拍摄的片段。

Lytro 从2012年就开始制造消费级的定点自动光场相机。他们在多年来一成不变的静态照相市场中找到了自己的一席之地,但光场捕捉带来的巨大市场潜力让他们开始进入了虚拟现实的世界。

Immerge,这个正处于研发中的 360°的光场相机,能够从所有的方向里获取光线,不仅仅是颜色,也包含光照本身的方向。这让它拥有了获取无接缝的真实世界的一部分,比起其它的360°相机,额外的好处就是能让用户在一定的范围内移动。

而这个额外好处也是最大的好处之一,因为它对于虚拟现实体验的沉浸和舒适相当关键。现在,Lytro 开始展示他们拍出来的光场作品,声称这是“第一个六自由度的360°实拍虚拟现实体验”。

月球这个片段的出现,意味着未来的虚拟现实电影院的走向。

这部片子时长45秒,一个宇航员在月球表面上,进行着阿姆斯特朗著名的1969年的演讲。“这是个人的一小步,”身后的地球飘过他的肩膀,“但是整个人类的一大步。”

“Cut!”你身后一个声音响了起来,原来你不在月球上,而是在一个录影棚里。身后的导演是库布里克,看起来似乎不爽,而演员说:“我是个演员,不是宇航员。”到此结束。

Lytro 这个光场相机貌似也还有些其它的牛逼功能,比如能改变瞳距(IPD,人两眼之间的距离,每个人都不同,相应的显示的画面也会不一样),以及后期需要的一些对焦。

Lytro 声称 Immerge 的光场不仅能捕捉到视差需要的数据外,还有随着用户视角改变的光效(反射会随着你的头部位置变化也有相应变化),以及无论你头歪到哪去都能正确显示的立体图像。传统的摄像机都是分别给你左眼和右眼拍摄且一直水平,因此当你歪头时就会出现问题。

lytro-5

Lytro 的工程师负责人 Tim Milliron 称 Immerge 能通过把上百个次级镜头的图像组合在一起达到单眼 8k 的分辨率。他们希望内容制作者能用 Immerge 捕捉到高质量的主文件,然后形成高端的六自由度内容,并通过应用的形式发布到桌面端头显,也能渲染成基础的360°视频文件,来在主流一些的设备上播放。

不过这个技术目前来说最吸引人的地方在于在工作流方面,基本上和目前的360°视频差不多。经过两天的摄制,后期是单人八周的工作量(在“月球”里,登月飞行器和月球的表面部分是外包公司的 CG 内容)。而这已经算过去式了,只是第一期 Lytro 摄像机和处理工具的工时估计。Milliron 预测未来同样的工作量可以处理时间长不少的影片。

去年,Lytro 进行了五千万美金的融资。尽管原计划今年上半年把 Immerge 搞定,但我们到现在才看到这台设备的第一个样片。Felix & Paul 工作室、Within(之前的“Vrse”)以及 Wevr 都将成为 Lytro 的一批合作伙伴,进行内容的拍摄制作。当然,如果想申请原型机,可以在这里申请:

官网地址

以下为官网的博客原文

今天是虚拟现实的一个大日子。今天,Lytro 宣布“月球”,历史上第一个六自由度的虚拟现实体验。

为了明白为什么这是虚拟现实一个历史性的日子,让我们先回过头来看看今日的业界格局。目前,在虚拟现实业内只存在两种体验。

高沉浸(六自由度),低真实度。第一种体验是通过即时游戏引擎制作出来的。这些体验有着强烈的沉浸感,允许体验者在虚拟空间中做六个自由度的移动,也就是 6DoF(你的头部有三个维度的转动方向,还有三个维度的移动方向)。但,这类体验都是由电脑在几毫秒之内生成的,尽管今日的游戏引擎技术已经相当成熟,但离照片级的现实还是有不少的差距,而在虚拟现实里这种差距就更为明显。

低沉浸(三自由度)。高真实度。第二种体验是360°视频。这些能提供“高真实度”的体验,它们能展示那些通过真实世界拍摄并花费数百小时一帧帧渲染的高质量内容。但,它们没有“高沉浸感”,因为体验者被限制在了空间内的一个点上 – 实际上,体验者只是在观看一个超大的覆盖了所有视野的一个球幕。我们称之为 3DoF,体验者只有在转动方向上的三个自由度,而没法移动。

而这些,都不能为我们带来梦想中的“飞行背包和飞车”般的虚拟未来。虚拟现实理当为我们带来完全逼真的世界,无论是真实还是幻想出来的,并让我们所有的感官都沉浸到里面去,让我们因为周围的真实而从潜意识里相信眼前的一切是真实的。而这样的虚拟未来需要“高真实度”以及“高沉浸度(6DoF)”。这是一个还没有任何技术能做到的需求 – 直到这一刻。

lytro-immersion-realism

“月球(Moon)”是第一个达到这个要求的体验 – 结合了真实拍摄的电影级画质和真正六自由度的移动。这是我们梦想中的虚拟现实的第一步。

我们是通过 Lytro Immerge 光场相机、处理管线和回放技术打造的“月球”的,而这个演示展示了虚拟现实光场技术的几个关键要点:

  • 视差。或者是,能自由移动观看物体的能力。这是让你觉得你“在那里”的关键元素。
  • 正确的立体图像。无论你在看场景的那一部分,或者倾斜转动你的头,“月球”将显示正确的立体图像。这和目前只能让你水平看的360°立体影像完全不同。
  • 实拍和电影级电脑生成图像的无缝结合。“月球”里的 CG 部分不被实时渲染的限制所累,因此它可以和实拍元素无缝结合到一起。
  • 随着用户视角改变的光效。就像反射,只有光场技术能精确地重现闪亮、如同镜子般的的真实世界的物体,比如“月球”里宇航员的头盔。
  • 无接缝差错。 由于光场抓取能让我们精确地重建整个场景,“月球”没有任何360°视频里普遍存在的接缝现象。

当然,现在还只是虚拟现实光场技术以及整个虚拟现实技术的早期。“月球”是第一个使用 Lytro Immerge 制作的体验。在制作过程中,Lytro 的工程师团队也极大地改进了整个系统。未来的体验将更容易被拍摄,更快速被处理,更容易被下载和放映,以及最重要的 – 看起来更好。在 Lytro,我们将不遗余力地向着长远目标前进,我们等不及想要和内容制作者共同奋斗,为达成梦想中的虚拟现实而努力。

在接下来的几周内,我们将撰写和光场技术以及“月球”制作相关的内容。奋战!

-Lytro 工程副总裁 Tim Milliron

lytro_logo_dark


Source:RoadtoVRWiredLytro

LEAVE A REPLY

Please enter your comment!
Please enter your name here