普通照片一秒变「3D」,并非仅仅是噱头。
如果乔布斯看到最新的 iPhone 11 Pro 后面的三颗吐出来的「浴霸」造型摄像头,不知道会作何感想。当然,不管「乔帮主」可能会怎么看,摄像头个数代表手机档次,已经成为一个潜规则。虽然牺牲了部分造型,但确实给手机带来了新的功能,例如获得深度信息,这也是为什么出现了 iPhone 拥有双摄之后,出现了能够虚化背景的「肖像模式」。
新功能需要新玩法,两年前,Facebook 推出了 3D 照片的新功能,正是通过双摄手机的「肖像模式」,让 2D 照片出现「部分 3D」的效果。遗憾的是,当时拥有双摄旗舰机的人还是少数的。几天前,Facebook AI 发布博客,表示通过神经网络训练,现在 Facebook 已经可以将普通单摄手机拍摄的 2D 照片,转化成具有 3D 效果的图片。
除了用户在手机页面停留更长时间,「3D 照片」功能背后的积累,可以落地在更多场景,例如 AR 场景以及无人驾驶。鉴于 Facebook 对于 VR 的野心依旧,这项新功能将如何实现扎克伯格「10 亿人共 VR」的梦想,也令人颇为期待。
2D 照片如何变 3D
同样是 3D 照片,两年时间有什么不一样的?答案是,深度信息。2018 年的 3D 照片功能要依赖当时手机双摄「肖像模式」带来的深度信息,而现在 Facebook AI 可以直接将任何时候拍摄的 2D 照片转化出 3D 效果,不需要深度信息。
抛开深度信息来制造 3D 效果的照片,需要面对两个挑战,一个是训练模型来推测各种物体的 3D 位置,另一个是优化系统来让各种移动设备都能在短时间内将功能跑起来。为此,团队使用卷积神经网络(CNN)训练







