详解Facebook全新360光场相机 6DOF VR视频不是梦

2017-04-21 09:27:47   来源:新浪VR

  Facebook大会第二天,虽然小扎不出来了,但是脸书持续刷屏。F8第二天,脸书曝光了其360°视频平台Facebook 360的全新相机,x24和x6,从名字上能够看出来一个足球篮球大小,一个排球大小的全景相机结构。更神奇的是,两台相机结合OTOY的技术,能够实现类似于光场的6自由度360°视频体验,并能通过Unity、Unreal、AE等软件组成流水线进行后期处理。

  据悉,Facebook将会找合作伙伴来生产x24和x6相机,产品可能在今年晚些时候曝光,不过定价未知。去年Facebook推出的开源360相机阵列的价格在3万美元左右。

先让我赞一下设计和外观

  先让我赞一下设计和外观

  相对于去年推出的360相机的双锅盖造型,x24和x6采用了球型设计,而且个头都不小,x6看起来有排球大小,x24估计有篮球大小,但是两台设备看起来都十分高端,不仅是渲染图层面,实物看起来也相当有质感。瑞云科技的梁幸尧透露,相机本体是用超高精度5轴CNC智能机器人车床做的一体结构,精度非常高。根据Moor Insights & Strategy的Anshel Sag透露,大一些的x24相机由知名红外成像制造公司英国菲力尔公司(FLIR)制造,小一些的x6则由Facebook的内部硬件团队制造而成。

  从外观上来说,x24和x6的看起来甚至比诺基亚的OZO更具有科技感。

  带深度信息的6 DOF视频

  目前很多公司都在尝试解决360°视频的6自由度问题,就是让观众能够在视频中动起来,前后左右能看到不同的景象,而不仅仅是转动头部。其中一个解决方案就是光场技术,这其中比较出名的是Lytro,我们前几天还介绍了他们的新版Immerge光场相机。

  不管是光场还是其他技术,要想做到6自由度视频,要解决的都是如何记录深度信息的问题。而这也是为什么Facebook会和OTOY公司联手,因为后者将捕捉到的360°影像信息看成是一个信息点流,从中提取出足够的深度信息,计算出一个空间范围,让观众能够前后左右从不同角度来观看360°视频,“其实就是一个光场了。” OTOY创始人Jules Urbach说到。

  根据Facebook,x24相机能够捕捉每个像素的完全RGB和深度信息。每个信息点会被采样4倍,同时利用深度信息测算算法来捕捉高清影像和深度信息。小一些的x6能够采样3倍信息。x24能够捕捉含有深度信息的1.2亿像素点云,拍摄8K清晰度,每秒60帧的视频。

  即使能测算出深度信息,依然会有深度信息缺失的部分,例如HypeVR使用的激光雷达+光学摄像的方式,虽然能制作出类似于光场的效果的效果,但是被遮挡物体后方还是会形成一个“光场黑洞”,对此,合作伙伴OTOY的详细解决方案是:

相机的摄像头分布能够创造出精准的重叠部分,而这些重叠视角(x24相机有8个重叠视角)能够补充任何深度信息缺失的部分和阴影;对于远景的深度信息缺失部分,我们使用启发测算来填补这些缺失信息。

在F8大会上会讨论一个简单的工作流程,就是在拍摄动态元素之前,先拍摄一个背景环境底版。利用OTOY软件能够非常轻松的将这些底版加到影像中,最后,OTOY正在研发一个模板,能够让x24相机进行4-6秒的直线或者环形运动,实现光场捕捉。

  一般360°视频相机都有安全距离,即物体如果距离相机太近,就会出现图像缝合问题,变得支离破碎。根据Jules Urbach的说法,x24和x6的安全距离都在1米左右。

真人视频游戏化时代到来

  真人视频游戏化时代到来

  如果只是在360°图像添加深度信息,那Facebook和OTOY此次的联手意义也不算深远,更重要的是两家正在和Adobe、Foundry、Mettle等后期软件公司合作研发工具和流程,让6自由度的360°视频能融入传统影视后期制作。

  Jules Urbach描述的具体流程是:

  1。 使用Facebook相机拍摄的信息上传到Octane渲染云端被处理成点云信息,然后输出成一个ORBX(带有深度信息的Octane文件)的Scene File。

  2。 ORBX Scene File可以输入到AE、Nuke或者Unity和Unreal等制作软件和引擎进行编辑。

  3。 经过一系列后期软件出来后,能够生成一个ORBX Media File,这个文件通过Otoy的合作伙伴就可以在Web、PC和移动端VR头显上进行观看了。

  Jules的视频中,最令人感兴趣的是目前VR开发者最喜欢使用的两个游戏引擎Unity和Unreal都已经支持Otoy的技术,而开发者可以使用游戏引擎来随意改变ORBX Scene File中的360°视频,例如改变光照和颜色等等,甚至加入带有互动的元素和物体,创造出类似于游戏一般的实时互动效果。

  从这个角度来说,Facebook和Otoy在软件和硬件端的联手,提出了一个彻底改变VR视频制作和消费的可能方向。

开源还是不开 这是个问题

  开源还是不开 这是个问题

  和去年曝光的360相机不同,今年Facebook的这两款相机x24和x6并没有透露是否会开源。单纯从制作角度来说,新款相机的制造难度就不是一般公司能够制作的,这也是为什么脸书会和指定的合作伙伴来生产相机,而不是像去年一样告诉大家用什么配件来组装——今年Facebook即使告诉大家怎么做,能没什么人能造出来。

  正如Jaunt VR和诺基亚的OZO,两个告诉360视频拍摄器材更多是选择合作伙伴来使用,或者专业机构来租赁,而非售卖,Facebook的这两款相机估计也会采用合作的形式,给想要尝试的机构和创作者来使用,而制作出来的作品,不出意外的话也会成为Oculus和Facebook平台的独家内容。

  Facebook今天的鸡血打的很好,只是不知道大家什么时候能用上x24和x6这两台机器,正在F8大会前线的Zcam负责人Jason透露,相机拍出的Demo依然有瑕疵,且真正能用到两款设备还需要比较长的时间。

  后记

  从6头Gopro到Jaunt One再到诺基亚OZO,到Lytro、HypeVR和今天的Facebook x24和x6,拍摄硬件的演化证明了要想成为真正的VR内容,带有深度信息的可互动的360°视频才是前进的方向,虽然要达成这个目标,尚需一段时日。在那之前,我们可能还是要在3DOF的全景视频中摇头晃脑一阵。

  更多Facebook x24和x6图片

 
新浪声明:新浪网登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。
精彩推荐
相关新闻

硬件念念碎:性能/价格双杀NV竞品VR显卡 点评AMD RX 580

VR元年(2016年)诞生的HTC Vive准入显卡,以NVIDIA GTX 1060、AMD RX 480为代表,AMD RX 480在性能处以下风,卖的并不好。面对V...

相关硬件念念碎:3GB GTX 1060规格曝光 阉割卡照秒AMD竞品
2017-04-20 20:08:48 来自:硬件前沿

印度VR/AI创企Absentia融资123万美元

VR/AI创企Absentia在4月17日宣布其在PreA轮融资中获得了八千万卢比(合约123.78万美元),投资方有Exfinity Venture Partners、T...

相关: 暂无...
2017-04-20 16:40:59 来自:新闻

丁义珍潜逃美国后,竟然做起了VR!

丁义珍教你怎么用VR捞大钱!

相关专注沉浸式VR网络开发工具,Vizor获230万美元种子轮融资
2017-04-20 16:18:17 来自:新闻

【VR全景】《迈罗·墨菲定律》 能看出Milo一共出现了多少次吗?

Milo在哪里?动起你的脖子上下左右找找看,你能看出Milo在画面中出现了多少次?

相关【VR美女】童颜女友陪你畅玩游乐场
2017-04-20 15:06:16 来自:搞笑娱乐

央视网将VR直播“天舟一号”飞船发射

天舟一号首飞在即,央视网联手《中国相册》栏目组,对火箭发射进行VR直播。这将开创国内航天领域VR直播先河。

相关以后去影院要领VR头显 华纳透露VR影院解决方案
2017-04-20 15:01:27 来自:新闻

热门推荐

HOT RECOMMEND

微博

HOT RECOMMEND

新浪VR简介 | 论坛社区 | 网站合作 | 广告服务 | 联系我们 | 免责声明 | 招聘信息

Copyright © 1996-2015 SINA Corporation, All Rights Reserved

北京游梦创想网络技术有限公司 版权所有