设为首页加入收藏
全站搜索
新闻详情
 
当前位置
用深度进修解救手抖!FB详解全景照片修正才能
作者:    发布于:2017-12-04 12:03    浏览次数:
  

(原标题:用深度进修解救手抖星人!Facebook详解全景照片批改才能)

陈桦 编译收拾

量子位 报道 | 大众号QbitAI

拍全景照片,重要的是手要稳,手要稳,手要稳……或许支个三角架。

量子位就知道一些名副其实、常常手抖的人类,常常拍成这样:

用深度进修解救手抖星人!Facebook详解全景照片批改才能

疼爱这张桌子一秒……

用深度进修解救手抖星人!Facebook详解全景照片批改才能

最近,Facebook为了解救手残星人、让用户们欢快地发更多的全景照片,开始研究用深度进修来调整360度全景照。

Facebook官方博客本日详细介绍了这项技能,量子位编译如下:

自上一年Facebook发布360度照片功用以来,用户已经上传了赶过7000万张360度照片。

Facebook供给了多种办法去拍照360度照片和视频,让用户能够与社区共享自己的入神式体会。假设你有专门的360度相机,例如理光Tehta S或Giroptic iO,那么能够将相机中的内容直接上传至Facebook。现在,高端Android手机和iPhone也供给了全景相机功用,能够用于拍照360度照片。

曩昔一年,Facebook开发并陈列了多种技能,用于优化用户制造并共享360度内容的办法,例如360度拍照和360度视频防抖,并从头开发了保存高清媒体内容的办法。

最近,我们开始探索,操作深度神经网络主动调整360度照片的标的意图,给用户的手机带来更多真实的入神式体会。

制造高分辨率360度照片

近期我们公布颁布,在Facebook运用中直接参加一项新功用,经过无限制的立异用户界面,协助用户拍照无缺的360度场景。文章最初的视频展现了Facebook运用的360度拍照功用。

相关于传统的照片,360度照片的文件体积往往更大。

因此我们面临的应战之一在于,在消息流参加360度照片之后,怎么协助人们更快地阅读这些内容,一起确保当用户停下来不雅观欣赏某张360度照片时,供给无缺分辨率的版别,并支撑旋转、拖动和缩放等功用。

假设直接供给无缺分辨率的版别,那么会导致当用户滚动消息流时其他内容加载缓慢,并占用很多内存去处理照片。

面临这些应战,我们从头设想了Facebook的照片基础设备,完成照片内容的“平铺”保存办法和展现办法。

用深度进修解救手抖星人!Facebook详解全景照片批改才能

每张360度照片都被转换为立方体图,这类似于我们前期对360度视频的做法。这些立方体图随后被保存为多种分辨率,而每种分辨率都被进一步分拆为独立的、更小的512x512图片。

当360度照片被查看时,我们判别在当时窗口中应当衬着什么样的分辨率和什么样的平铺作用。假设当时分辨率不成用,我们就会暂时衬着较低分辨率的版别,一起等待网络传输高分辨率版别。

跟着用户在360度照片中的拖动和缩放,我们会从头中止这样的核算。这种调整让我们能够展现包孕数亿像素的照片,而不会对功能孕育发作太大影响。

用于360度照片的深度神经网络

上传至Facebook渠道的数千万揭露360度照片供给了强壮的新数据集,辅佐我们优化产品。360度数据本身能够与机器进修办法合作运用,给用户带来更好的体会。

导致360度照片违背实景的最根本问题之一在于,在拍照360度照片时,假设相机不行程度,那么所孕育发作照片的旋转就会不正确。

能够看看下面的这个比如:

用深度进修解救手抖星人!Facebook详解全景照片批改才能

在拍照这张照片时,手持相机的办法有问题。这导致了程度线的歪斜,照片的失真。

关于传统照片,用编纂软件能够很简单批改这种照片旋转的问题。但是,相同的东西并不适用于360度照片,在球面上批改旋转问题看起来也很不直不雅观观。

360度照片的旋转问题由两个参数来决议,分别为歪斜和滚动,如下图所示:

用深度进修解救手抖星人!Facebook详解全景照片批改才能

脚注信息
Copyright © 2013 贝斯特全球最奢华娱乐贝斯特全球最奢华娱乐注册_ 贝斯特全球最奢华娱乐官方网站_ 贝斯特全球最奢华娱乐欢迎您 All Rights Reserved |网站地图|