縫合360°全景視頻（下）

初步縫合 Base Stitching

在做完360 0全景視頻素材的時間軸幀同步之后，就可以正式進入縫合了。通常情況，縫合會分為兩個階段，階段一是初級縫合（ Base Stitching）;階段二是精細縫合（ Advanced Stitching）。現階段幾乎所有的3600全景視頻縫合軟件、插件（包括Kolor系列、VideoStitich系列和Nuke的插件CaraVR等）都是一個基于圖片/靜幀的縫合模式，通過縫合好單幀（frame）再同步縫合效果回到視頻（ video）上的縫合。

值得一提的是，階段一的初步縫合，往往是自動的，主要依靠軟件的算法。而階段二的精細縫合，通常都是手動的，主要依靠操作人員的經驗。

關于全景視頻的初步縫合，基本上都分為三種模式：預設縫合、模板縫合和數據縫合。

預設縫合（ Preset），顧名思義，使用的是軟件預設的相機數據來進行縫合。場景的預設往往有GoPro系列、Entaniya系列和Izugar系列等等。像CaraVR for nuke這款插件的設置預設了更多的全景相機縫合模板，包括了Jaunt ONE、諾基亞的020等等。

預設縫合更多的是一種參考，實際使用還是必須根據當前案例細致地調整，比較每一個案例的差異性、每一個場景的空間和景別（前中后景景別）信息會發現總是不一樣的，在畫面缺少細節無法縫合的時候，使用預設縫合會有出其不意的效果。

模板縫合（ Tem plate），其原理和預設縫合一樣，只是這一次不再是軟件內置的預設，而是由我們自定義的全景視頻縫合模板。值得注意的是，有且僅有在保證前后兩次拍攝的全景相機支架序號、相機序號、SD卡序號以及相機視頻素材命名完全一致的情況下，才能使用模板縫合。換言之，這兩個3600全景視頻的場景使用的設備必須完全一致，才能套用模板。這也是我們一直在強調的標記（ Mask）的重要性。

模板縫合減少了出錯的概率，也就減少了縫合時計算的時間，同時也讓批量縫合成為了可能。值得注意的是，如果要調用全景場景A的工程作為全景場景B的縫合模板，那么全景場景A的工程文件和原始素材都必須在同一個文件夾內。更確切的說是全景場景A的工程文件和該工程文件所依賴的圖片縫合素材必須在同一個文件夾內。

如圖所示，全景場景A的完整工程文件必須具有包括.kava的AVP工程文件、.pano的APG工程文件、以及全景視頻素材單幀截圖。只有在這個條件下，全景場景B才能調用全景場景A的工程文件作為模板縫合。

參數縫合（ Data）。實際上，這個模式更多的是要求制作人員了解其全景相機。如這臺相機是否有魚眼？焦距是多少7當制作人員知道一些參數之后，將參數反饋給計算機，計算機和軟件會根據現有的信息進行畸變、分析和縫合。這個縫合模式更像鏡頭類型的縫合。

精細縫合

從縫合的階段一進入到階段二的時候，也就正式進入了精細縫合的階段。精細縫合往往是對3600全景圖片進行微調，這將直接決定了最終的縫合畫面效果。這一階段有幾大主要內容：

1.調整縫合控制點

2.調整水平線

3.調整曝光

4.調整主體目標

5.設置融合模式

6.單幀渲染測試

等等。

對于不同的場景和拍攝內容，精細縫合的內容和順序可能是不一樣的。建議先從調整縫合控制點開始入手。

調整縫合控制點，指的是手動微調相機與相機之間的縫合控制點。控制點往往決定了全景圖片（視頻）的最佳縫合質量，也是最直接最直觀影響縫合效果的。檢查畫面之間的控制點是否正確、主體目標上的控制點是否正確的匹配等。Kolor系列軟件有相對比較完善的控制點調整工具，有點類似于老牌全景圖片縫合軟件PTGui。相反VideoStitch Studio視頻縫合軟件則沒有控制點調整工具，無法對3600全景圖片進行手動微調。

調整水平線是一個相對簡單的工作，在打開輔助線的情況下可以非常快速調整全景圖片（視頻）的地平線。值得注意的是這里所講的調整水平線是針對室外的水平線調整，室內的水平線調整則相對復雜一點，因為在室內實際上是看不到水平線的，更準確來說在室內是看不到水平線消失的盡頭的。這個時候可以使用KolorAutopano Giga提供的豎直線工具來調整。

曝光差異的問題一直存在，不管是使用運動型相機、單反級別相機還是電影級別相機一一它們的之間的不同僅僅是曝光差異的多與少。目前幾乎所有的3600全景視頻縫合軟件均提供一鍵自動調整曝光差異的功能。除此之外，Kolor AutopanoGiga則還可以設置調整曝光的參照面面，讓全景視頻里的其他鏡頭畫面去匹配所選的參照畫面。

主體目標——指的是整個全景里面的拍攝主體目標。通常名勝古跡、人物形象、風光建筑等會是全景里面的拍攝主體，通常能通過一些技巧，在后期縫合里面對這些拍攝主體進行完整的呈現和保留。KolorAutopano Giga提供了一個遮色版（Mask）工具來完成這個精細縫合的任務。當然了，使用這些技巧是建立在其中單個相機記錄下完整的主體目標的情況下。

做完大部分的精細縫合調整工作之后，就可以設置圖片之間的融合模式，然后渲染單幀的全景圖片進行查看。如果沒有問題則可以同步縫合效果回到全景視頻處理做最后的渲染輸出。

【釋義】兩個“同步”

“同步”一詞本書提及次數較多，這里特別做詳細說明。本連載提及的“同步”，實際上涉及到兩個完全不一樣的概念。原本均是英文，翻譯過來都是“同步”之意，所以難以甄別。

其中一個“同步”，指的是幀同步，英文為：frame synchronization，指的是在導入視頻準備縫合前要做的一項工作。把所有全景視頻素材的時間軸進行幀同步，以優化縫合質量。主要的幀同步方式有聲音同步、畫面同步和閃光同步。

另一個“同步”，指的是縫合效果同步，英文為：result matching，指的是在使用Kolor Autopano Video相KolorAutopano Giga的時候，兩個軟件的編輯和操作同時建立在一個（.pano）的工程文件上，當保存Kolor Autopano Giga的縫合效果時，這個縫合效果會同步到KolorAutopano Video里面。

渲染輸出

在做完精細縫合之后，成功的同步精細縫合的效果回到視頻縫合軟件，然后是進入3600全景視頻縫合的最后一個環節：渲染輸出。和其他傳統的非編后期軟件一樣，設置好時間軸上的出入點是非常重要的。而不同于傳統的視頻，往往在錄制全景視頻的前幾分鐘和后幾分鐘時，工作人員會進行全景相機開機、錄制、檢查、同步、停止錄制和關機等等，所以需要對視頻最前面和最后面的部分進行裁剪，裁剪的準則是直到工作人員離場或者在全景里面看不到工作人員即可，這些可以在時間軸上進行檢查。

設置好要輸出的時間后，接下來要對渲染輸出的參數進行設置。由于360度全景視頻的特殊性，普通的360度全景視頻的分辨率比例比較特殊，是一個寬高為2：1的比例，而3D的360度全景視頻的分辨率比是1：1或者4：1，且360度全景視頻的分辨率通常比較大，最低都是4K的分辨率，即4096x2048的一個分辨率。巨大的分辨率會導致渲染時間非常久，所以正確的渲染設置就顯得非常重要，畢竟沒有人愿意在等待半小時后發現因為渲染參數設置錯誤而需要重新輸出。

關于360度全景視頻一些比較重要的渲染參數有：分辨率、幀率、格式、聲音來源等等。

到底要輸出多大的分辨率7這或許是你在渲染360度全景視頻時遇到的第一個問題，也是最重要的問題之一。是標準的廣播級UHD（ 3840x1920）呢？還是電影級別的4K（ 4096x2048）7亦或是手機等移動端播放的2K（ 2048x1024）？還是只是單純想輸出個lk（ 1024x512）的小樣來進行預覽？

需求決定要求，要求決定設置。謹慎考慮好360度全景視頻的播放載體，選擇正確的分辨率。因為4K和2K的渲染速度相差可不止2倍。

關于360度全景視頻的幀率設置，一般選擇匹配源素材，而且最好不要修改與原視頻素材不一樣的幀率。目前主流縫合軟件支持的最高幀率大都在60fps。

關于視頻格式，常見都是H.264做解碼，也就是經常看到的MP4視頻格式。MP4視頻格式還是有一定優勢的：體積輕巧，解碼快。另外，大部分的360度全景視頻縫合軟件都支持輸出序列幀和無損AVI格式。

關于聲音來源，由于目前360度全景聲音的技術實現難度高，目前大部分的360度全景視頻均是使用立體聲一一選擇360度全景視頻原素材其中一個視頻源的聲音源一一來作為最終的聲音源。通常選擇水平方向的聲音源較好。

當設置好所有輸出參數后，選擇正確的輸出路徑并命名好，接下來就是等待渲染最終的全景視頻了。