OTOY演示云端光场流直播技术

2024-12-16上海AR开发专家

• 
  OTOY的执行总监Jules Urbach相信光场技术是虚拟现实发展的终极奥义。光场技术本质上是以数字方式记录真实物体或虚拟物体反射的所有光线,从而实现多种神奇的技术。例如在拍摄范围内的任意角度观看逼真的场景,以及实时地完成演员的动态加光效果。OTOY相信光场技术可以解决VR渲染所面临的许多挑战,他们也已经对此进行了大力投资。日前RoadtoVR的记者Nate Kozak就OTOY最新的光场流直播技术采访了Urbach。
  上图为OTOY光场技术渲染的场景:包括所有3D数据,能实时进行运动,甚至可达到预渲染CGI质量。
  当然,光场技术给他们带来了诸多挑战。其中最重要的一点是文件的大小,因为演员或物体的详细光场信息所包含的数据量非常大,所以要通过一般住宅区的线路来传输更复杂的场景数据并不现实。这些线路可以承受几G大小的电影,但几T大小的文件就不太现实。如果全息数据储存渗透到消费者层面,我们或许可以从商店中购买到用塑料包装的光场数据。但现在的数据消费日益走向无线传输,而热衷于减少储存空间令技术发展走向了一个错误的方向。
  OTOY一直在努力解决这个问题,并表示他们已经找到了解决方法。成熟的压缩算法可以处理光场数据,像“类似于注视点渲染”这样技术使得OTOY的光场播放器只需渲染观众下一秒将要观看的区域。现在单个演员的光场数据传输速度已经达到1.5Mb/s的速度,所需网速比观看Netflix视频还要小,可轻松传输到智能手机上。
  https://v.youku.com/v_show/id_XMTc1NDQxMzc2OA==.html
  他们演示的demo或许能让我们一窥该技术所蕴含的无限可能。通过在智能手机上以AR形式运行,以及一个可供追踪的基准点,我们就能在屏幕上看到装扮成绿魔的演员(蜘蛛侠中的角色)。无论在什么情况下,他那张神经质的笑脸都如同真实生活中的高清照片一样清晰,他闪闪发光的牙齿和周围多个发光源都毫不例外地表明这并不仅仅只是3D图像。
  照片级效果的定义是,任意距离下的每个细节都要完美保留下来。一般的照片并不能让你看到人物的背面,但光场技术却可以。没有留心关心观察的人会以为这只是某人在摆弄一个精心制作的3D模型,因为大多数人都不明白光场技术的特点是什么,更不要说该技术对沉浸式媒体未来的意义。
  OTOY在
  Oculus
  Connect大会前夕就已经表示,在ORBX Media Player下一次更新的时候,光场流直播技术将会登陆Gear VR。在那时,或许我们就能感受到何谓光场技术。