2018年04月10日，谷歌在2015年推出了Jump，簡(jiǎn)化從拍攝到播放的VR視頻制作流程。高質(zhì)量VR相機(jī)能夠令拍攝變得更加簡(jiǎn)單，好消息是映維網(wǎng)了解到Jump Assembler則將令自動(dòng)拼接變得更快，減低投入的成本。借助成熟的計(jì)算視覺算法和谷歌數(shù)據(jù)中心的計(jì)算力量，Jump Assembler可以在沉浸式3D 360度視頻中實(shí)現(xiàn)清晰逼真的圖像拼接結(jié)果。

　　1. 拼接

　　今天谷歌正式為Jump Assembler帶來了了一個(gè)新的選項(xiàng)，支持系統(tǒng)采用基于多視圖三維重建(multi-view stereo)的全新高質(zhì)量拼接算法。這種算法能夠產(chǎn)生與谷歌標(biāo)準(zhǔn)算法一樣的無縫3D全景圖，但能夠通過復(fù)雜的圖層和重復(fù)的圖案來減輕場(chǎng)景中的偽影。它同時(shí)能夠生成有更清晰對(duì)象邊界的深度圖，而這對(duì)VFX非常有用。

　　下面我們先來看看谷歌標(biāo)準(zhǔn)算法的工作原理。它基于光流概念，亦即將一幅圖像中的像素與另一幅圖像中的像素進(jìn)行匹配。在匹配時(shí)，你可以知道像素是如何從一幅圖像“移動(dòng)”或“流動(dòng)”至另一幅圖像。在匹配每一個(gè)像素后，你就可以通過局部地移動(dòng)像素來插值中間視圖。這意味著你可以在拍攝裝置上的相機(jī)之間“填補(bǔ)空白”，這樣在拼接時(shí)就能實(shí)現(xiàn)一個(gè)無縫，連貫的360度全景圖。

　　2. 基于視圖插值的光流

　　谷歌最新的高質(zhì)量拼接算法利用了多視圖三維重建來渲染影像。區(qū)別何在?即便拍攝裝置上的其他相機(jī)也有可能看到相同的對(duì)象，但標(biāo)準(zhǔn)光流算法一次僅使用一對(duì)圖像;而谷歌的新方法可以同時(shí)在多幅圖像中尋找匹配。

　　這種全新的多視圖三維重建算法計(jì)算每一個(gè)像素的深度(如像素到對(duì)象的距離，一個(gè)3D點(diǎn))，而且拍攝裝置上任何能看到這個(gè)3D點(diǎn)的相機(jī)都可以幫助建立深度，令拼接過程變得更加可靠。

　　谷歌的新方法還有助于解決所有拼接算法都在面臨的關(guān)鍵挑戰(zhàn)：遮擋，亦即處理在一幅圖像中可見，但在另一幅圖像不可見的對(duì)象。多視圖三維重建拼接在處理遮擋方面的效果更好，因?yàn)槿绻�一個(gè)對(duì)象隱藏在一幅圖像中，這種算法可以利用拍攝裝置上的附近任意相機(jī)圖像來確定該點(diǎn)的正確深度。這有助于減少拼接偽影，并生成具有清晰對(duì)象邊界的深度圖。

　　如果你是一名VR電影拍攝工作者，并且希望嘗試這種全新的算法，只需在 Jump Manager的拼接質(zhì)量下拉欄中圖選擇“high quality(高質(zhì)量)”即可。