防呕吐 Facebook为360度视频研发去抖动算法

2024-10-31上海AR开发专家

• 
  Facebook认为360度视频是互联网的未来,Facebook也正在付出巨大的努力来让360度视频成为互联网的未来。
  去年,这家公司在其社交网络上增加了360度视频功能,Facebook是世界上最热门的互联网服务之一,全球用户超过了16.5亿。然后他们建造了360度摄像机,随后更是将其开源出来,给出参考设计让所有人都可以制造属于自己的360度摄像机。现在,Facebook正在努力去解决360度内容中一个难题:呕吐的问题。
  至少,Facebook工程部门的副总监Jay Parikh是这样认为的。今天,所有人都可以从诸如Ricoh这样的厂家处购买到相对便宜的手持360度摄像机,拍摄沉浸式视频,上传到各个不同的互联网服务中,包括YouTube和Facebook。但问题是这种视频会让所有人恶心。“360度视频的一个问题是抖动。”Parikh如是说,“你拍摄了一个360度视频,你展示给你的朋友看。然后他们看完后就像吐。”
  所以,Facebook中一支由前微软员工Johannes Kopf带领的工程师队伍把过去一年的时间都用来设计一个旨在稳定这些沉浸式视频的算法,而现在Facebook正在其社交网络上进行测试。Kopf在接受WIRED的采访时表示:“一个摇晃的滑雪视频看上去就像是从山上平稳地下滑。”
  一般的智能手机视频都支持视频去抖动算法,但360度图影需要一些特别的东西。Kopf指出,Facebook的新方法名为“deformed rotation”(畸形旋转),这个方法可以在每帧少于22毫秒下稳定360度视频。意味着这适合在网络没有大幅延迟的情况下观看视频。Facebook表示,这个工具会向任何使用Facebook或者
  Oculus
  Rift的用户开放。YiViAn相信这个算法可以帮助拍摄“大范围移动延时”的360度视频。
  对于Facebook来说,360度视频是扎克伯格实现虚拟现实终极愿景的一块垫脚石,在这个愿景中人们将会通过VR进行通信和社交。今天,你可以通过一般的Facebook应用中观看360度视频,同样也可以通过像Oculus和三星Gear VR这样的虚拟现实头显来进行观看。谷歌也正在使用同样的策略:支持360度视频功能的YouTube、谷歌Cardboard头显、以及360度摄像机。
  正如Kopf解释的一样,这个新的去抖动算法并不是针对Facebook的Surround 360摄像机。Surround 360摄像机是一个专业的摄像机,可以牢牢地固定在地上并进行录制视频。这个新的算法针对的是像Ricoh这样的消费者级手持摄像机。Facebook的想法是,当用户将360度视频上传到Facebook上,这个算法会自动调整这些视频,让其变得流畅稳定。Kopf说,希望整个过程会是无缝进行的,出现在新闻推送的视频不会再有抖动的情况出现,而所有人再也不需要把午饭吐出来。