8K、立體、重慶全景制作和VR影像已經(jīng)起步
在2019南昌未來影像藝術(shù)周上，來自上海樂蝸信息科技有限公司的CEO 宿斌在大會專場演講上，以“VR實拍電影的制作與思考”為主題進(jìn)行了分享。分享內(nèi)容包含VR實拍技術(shù)的應(yīng)用、重慶VR公司觀賞習(xí)慣與傳統(tǒng)影視的差異化，以及全景聲技術(shù)的應(yīng)用等等。
以下為演講的整理內(nèi)容：
大家好，我是上海樂蝸信息科技有限公司CEO宿斌，今天我想跟大家分享的是VR電影的制作流程。
VR電影我覺得需要解決的還有六個問題，包括影像畫質(zhì)、如何拍攝運動的畫面、鏡頭的設(shè)計和敘述，如何制作全景深，有可能對于電影工業(yè)的5.1和環(huán)繞立體聲已經(jīng)很成熟了，大家對于全景深這個標(biāo)準(zhǔn)的話，還是沒有太多的準(zhǔn)確標(biāo)準(zhǔn)制定。
包括還有后期合成和制作，最后是播放和歡迎的體驗方式。我們認(rèn)為8K是VR影像最基本的要求，因為在以往我們看到4K展開之后，我們實際觀察到的影像其實只有不到720P，清晰度是非常糟糕的。現(xiàn)在我們認(rèn)為8K的立體和全景深是VR影像的起步。
一般我們都知道，常規(guī)的畫面VR會采用1比1上下立體和1比2壓縮的立體，也有用1比2的非立體的格式來呈現(xiàn)畫面，它跟電影的制作流程各方面都是不同的。
我們所說的VR4K或者8K是指的整個全局，但是觀眾第一視角能看到的局部只有像方塊當(dāng)中的這一部分，其他部分都會被你需要轉(zhuǎn)向來觀察，所以對于8K的話我們是以全局的方式來說8K和4K。
大家從這個圖來看的話，遠(yuǎn)遠(yuǎn)知道4K的影像中間的部分肯定是沒有4K的清晰度的。這個是我們預(yù)測兵馬俑的時候一張截圖，我們只有8K的畫面通過放大、放大，最后得到接近于電影清晰度的影像。8K和16K我們認(rèn)為是用分鏡頭的分布相機，提高畫面的清晰度，才能達(dá)到12、16K，這就對單反的清晰度的要求非常高，所以分布式我們行業(yè)當(dāng)中都達(dá)成了共識。
我們覺得有兩種布局的相機，如果要拍攝VR的立體相機我們現(xiàn)在目前采用的水平布局，因為他在水平布局方面立體會更加均勻。前一段時間Facebook和Red做的球狀的，是一個蜂窩的布局，它其實是深度信息最后制作成六自由度的云相機，當(dāng)然這個相機從實際來看的話，它會很大，將近有一米多。
我們拍攝的采用的攝影清單有JustWang、instaita，它們主要是完成靜止、軌道和小車運動。我們?nèi)绻每罩泻脚牡脑挘覀冞€是用的InstPro，因為它體積小，重量輕，續(xù)航時間長，當(dāng)然我們也有自己的20M的模塊，自己搭建了攝影機。
那么省下的攝影機我們也用20M的模塊，為什么要用這么多？因為在水下拍攝的話受水下光線的折射，所拍攝到的畫面跟在空氣當(dāng)中拍攝的畫面比例是不一樣的，所以我們要很多臺相機來涵蓋。
我們在拍攝延時的攝影的話，就采用最傳統(tǒng)的方式，用6M索尼的單反，因為索尼可以得到一個非常高的感光度，可以用于拍攝日落日出或者星空。
我跟大家分享一下我們是如何拍攝運動的畫面，我們采用可以做精準(zhǔn)數(shù)字軌道，因為很多時候我們在拍攝的時候發(fā)現(xiàn)需要用數(shù)字軌道來精準(zhǔn)地計算和重復(fù)地拍攝。航拍我們是自己搭建的多組穩(wěn)定的，高負(fù)載的，它續(xù)航到15分鐘。
像大型的場地和演繹場所我們其實可以用大型的飛貓，現(xiàn)在飛貓的技術(shù)也是非常普及，它可以精準(zhǔn)地定位。全梯形小車我們自己改裝了一輛叫坦克，它的優(yōu)點是各種地形能夠適應(yīng)，同時我們加載了一個穩(wěn)定系統(tǒng)，在跟蹤拍攝或者是復(fù)雜、危險的場地用它來拍攝一些影像是很方便的。
我們在拍攝這么多的內(nèi)容，我們發(fā)現(xiàn)在拍攝運動畫面的時候，有三個點大家需要注意：
第一，消除振動。所謂振動主要是高頻振動，因為低頻振動可以通過軟件都可以去做掉。
第二，消除搖擺。因為搖擺是對于后期軟件來講是無法去做到，它只會判定你是在轉(zhuǎn)向。
我們在拍攝的時候一定要設(shè)計好A點到B點或者是多點的運動軌跡，運動軌跡可以最后被我們的六自由度的座椅獲取它的數(shù)據(jù)，可以提供一些后期的影院應(yīng)用。還有一些我們在設(shè)計線路的時候?qū)а菀紤]到為什么要這樣飛行、這樣的飛行可以讓觀眾體驗到什么。
第三，擦除設(shè)備的痕跡。它不像電影，電影的話永遠(yuǎn)是一個框畫，在此以外所有的信息，在VR拍攝過程當(dāng)中是完全被識取的。
這一個就是我們航拍器拍攝的鏡頭，我們可以看到頂部的航拍器會清晰線路在畫面當(dāng)中，這個就后期通過運動跟蹤擦除掉，最后形成一個完整的重慶全景制作畫面。
昨天很多的分享者，也講到他們公司的特點，包括掃描等等，通過掃描重建場景我們也在嘗試，可以接觸掃描建立一個非常好的模型，我們也做三星堆的一個片子但是一直也沒有發(fā)布，制造一個博物館的一個內(nèi)容，就是高精度模型要比實際拍攝的來得更精致。
通過多視角三維重現(xiàn)我們也可以獲取一個模型，這一個模型都是非常普遍了，通過計算得出點云，用深度信息，三維再重建模型。
我們是跟清華有一個合作的敦煌的模型，關(guān)于構(gòu)圖了取景我們是有我們的想法，我們在拍電影的時候沒有一條法則是規(guī)定攝影機一定是水平的，是相對的水平，但是在拍攝VR的時候，它非常不同的，它必須要保持水平。如果是不保持水平的話會在后期給觀眾帶來很大的麻煩這一個在后面我會講到。
在后期當(dāng)中我們做了一個測試，如果我們在后期把水平線往上提到會呈現(xiàn)的圖片，整個地球形成一個拱形的，如果水平正常的話，地平線是水平線是一個標(biāo)準(zhǔn)的，如果水平線偏下的話它會形成凹拱的一個形狀，這樣的扭曲在拍攝后期是非常注意。拍攝當(dāng)中的水平是把最立體的區(qū)域要給到拍攝的對象，這一個后面我也是會講到的。
為什么要做到水平，這一張圖就是一個非常好的例子，我們看到這是一幅用水平分布相機的截取，水平分布的相機有一個特點就是在四周360度呈現(xiàn)的一個多幕，立體的，但是在頂部和底部是成為一個非立體區(qū)，我們用多幕立體有一個很大的漏洞，它不像深度相機。
我們抬頭的時候我們所看到的影像是無法構(gòu)建立體的，我們觀眾有可能旋轉(zhuǎn)，就會導(dǎo)致整個立體的區(qū)域會變得反向。
VR現(xiàn)在一個標(biāo)準(zhǔn)就是上下是非立體，不論是多近或者是多遠(yuǎn)都成一個非立體，在立體區(qū)域和非立體區(qū)域構(gòu)成了一個過度，這也是我們?yōu)槭裁匆胖迷谒剑绻鄼C位于仰拍的話，可能在你的目標(biāo)，或者是拍攝的對象、演員就會把他置于一個非立體區(qū)域。
這也是我跟大家分享過很多次的一個視覺的主要視區(qū)，我們覺得VR拍攝，不管把它叫做電影或者是影像也好，它一定是有規(guī)律的，它不是一個360度完全自由的創(chuàng)作，我們要規(guī)范導(dǎo)演或者是表演者有一個規(guī)則，所以我們認(rèn)為為什么要建立一個主要的視區(qū)這也是根據(jù)人的身體來判定的。
作為正常的人類，我們不會經(jīng)常移動身體，扭頭的360度。我們主要的視區(qū)還是在正前方的，作為兩側(cè)的一個60度作為一個過度區(qū)，因為過度區(qū)在一些次要信息的安排和設(shè)計。這一些設(shè)計也會為我們未來自由度的座椅提供一個依據(jù)，這一些坐標(biāo)同時也給導(dǎo)演和演員走位、導(dǎo)演的設(shè)計和后期的設(shè)計提供一個大家共同溝通的語言標(biāo)準(zhǔn)。
第一條參考線是我們自定的，是用于前期和后期做標(biāo)準(zhǔn)的，他有一個度數(shù)也有一個區(qū)域，中間是正前方，兩側(cè)是左右，最邊緣是的后部，在我們跟導(dǎo)演和后期來探討的時候，我們不可能時時刻刻用頭盔來探討，戴著頭盔有的時候很難交流。所以平面的方式還是在延續(xù)的使用。
我們知道VR是一個完整的空間，我們觀看者可以自由轉(zhuǎn)向，看上、看下、看左、看右，你看到的所謂的一個空間乃至于這一個地球是不會時時刻刻轉(zhuǎn)動的，是相對靜止的，所以我們在拍攝VR的時候盡可能慎用攝影機轉(zhuǎn)向。
它跟我們的傳統(tǒng)攝影不一樣，傳統(tǒng)攝影可能用一個搖鏡頭會拍得非?？犰?，但是VR要慎用，這一種轉(zhuǎn)向的是會很快把觀眾代入眩暈感，除非拍攝的導(dǎo)演和攝影師就希望讓觀眾呈現(xiàn)一個眩暈的效果或者是有意識的跟蹤也是可以的。
我們在拍攝過程當(dāng)中我們也總結(jié)了一些我們自己的經(jīng)驗，我們也充分利用帶來的沉浸感，不同的相機有不同的安全距離，我們發(fā)現(xiàn)在不同的距離會產(chǎn)生觀眾不同的情緒，在50公分是非常愛好的閨密、情侶之間的溝通，在70公分是一個比較親密的伙伴的溝通的距離。
在100厘米就是一個相對熟悉的同事溝通的距離，150公分是陌生的人或者是主角和配角激烈爭吵，他們之間發(fā)生清晰很大的一個距離。在2米左右的話就是以一個配角或者是舞蹈安全區(qū)，我們知道手臂展開時的距離和人的身高差不多，為了不碰到攝影機，在拍攝一個大動作的舞蹈或者是一個武打的戲，我們基本上要在兩米的一個距離，兩米五十是路過一個陌生人。因為太遠(yuǎn)的時候也會有四五米，但是距離越遠(yuǎn)，它的清晰度各個方面互相的一個感覺是不一樣的。
我們在測試不同距離的時候我們也測試了30公分，超近距離，這一個距離已經(jīng)達(dá)到了攝影機的極限了，我們通過自己配組的一個模塊我們拍攝了這樣一個影像，后面我們也會跟一些藝術(shù)家來制作拍攝一些超近距離的人像攝影，各種不同的職業(yè)，當(dāng)在30公分的時候是可以清晰看到拍攝者的臉上粉刺，同時你也會收到一種特別近的距離的一種壓迫。因為在特別近的距離雙方都會產(chǎn)生尷尬，但是拍攝者可能會因為攝像機過近。
決定距離不只是鏡頭之間的拍角，我們知道兩個鏡頭之間拍角，昨天有一位分享者講過了，一般拍角接近于人的眼睛，如果拍角越大，你拍攝遠(yuǎn)景的立體圖像很好，但是近具體的兩臺攝影機盡可能要縮短距離。
安全距離不只是鏡頭的開角、立體的成像、最佳的區(qū)域和機位的角度，剛剛我也分享到了在安全線以下，我們一般指的是非立體值。
其實多幕的攝影機是不完善的，因為多幕是需要進(jìn)行一個深度計算的合成，這一個合成當(dāng)中計算機處理的話影像還不是最完美的，它可能會產(chǎn)生一些干擾和波動，這一種干擾和波動主要是造成近景和復(fù)雜的背景，當(dāng)你的拍攝對象過于靠近攝影機，同時它背后有很多的復(fù)雜結(jié)構(gòu)的背景，同時也一個被拍攝者還是處于運動狀態(tài)，在大概率的情況下一定會出現(xiàn)一個干擾，這一個干擾就是會呈現(xiàn)一個波狀的紋路。
這一張就是特別近距離產(chǎn)生的，破壞影像的合成，所以產(chǎn)生了扭曲，同時我們在拍攝運動畫面或者是靜止畫面的時候一定要注意陽光在哪里、投影在哪里，如果拍攝者穿越投影區(qū)的話會給后期帶來一個非常大的工作量。
我們看到背后這兩個形成了視覺的交叉，這也是形成立體的原因，為什么會形成光流的干擾，背后數(shù)據(jù)計算機無法判斷速和人之間的關(guān)系。
我們再分享一下鏡頭畫面的設(shè)計，現(xiàn)在也在用PS當(dāng)中有一個3D繪畫功能制作一些很有趣的插畫，現(xiàn)在我們可以做VR的插畫或者是故事版通過PS，我們通過PS做了一張插畫，它可以在全體球形進(jìn)行擦除和修改，這給我們未來的項目提供了方便。
在這一個基礎(chǔ)上我們?yōu)槭裁匆O(shè)計運動軌跡，因為運動軌跡我們也考慮到未來的VR影院是有一大部分是有自由度的座椅，4D座椅會帶給你穿越的感覺，這一種運動線是需要前期設(shè)計好，最后把運動軌跡以3D為坐標(biāo)的方式捕捉下來給到座椅。
在VR的趨勢當(dāng)中，我覺得平面的故事有一個最大的區(qū)別在于，它是空間性的，我們在傳統(tǒng)電影更多表現(xiàn)的是平面畫幅的，畫幅以外的是靠想象，重慶3d動畫公司在拍攝VR過程當(dāng)中，我們在設(shè)計線索或者設(shè)計故事的時候，一定要考慮整個空間，多信息的運動。
我覺得在未來的VR故事當(dāng)中，一個場景當(dāng)中出現(xiàn)多個信息的設(shè)計是非常的有必要的，是VR故事的魅力。所以也印證了我們前面必須要設(shè)立一個主要的信息，其余部分我們暗藏了一些次要信息，當(dāng)然在做設(shè)計的過程當(dāng)中，它也需要我們拓展一些思維，我們平?？吹揭粋€畫框藝術(shù)的畫，就像我們看到太陽系平面一樣，我們展現(xiàn)給我們的是一個二維，當(dāng)我們知道太陽系在運動過程中是螺旋形的時候，我們的故事很像螺旋形太陽系的運作。
我們也會用全景聲來設(shè)計聲音的引導(dǎo)，我們目前使用的RooM的H3，交叉式的全景聲錄音機，我們的流程大概就是用全景聲的錄音機獲得一個三維空間的聲效，通過后期的混音，加上音軌包括人聲的對白等等。因為這個只是一個一階（簡單的全景聲），對于電影的標(biāo)準(zhǔn)可能需要二階，或者更多的信息。
在通過一些后期的回音設(shè)施，我們可以得到一個二階，比較復(fù)雜的全景聲。這是一個大概的一階、二階、三階，最高可以達(dá)到三階。
我們后期合成也是使用PR、AE等一些軟件工具，這個是我們作為一個運動，這是一個剪輯范圍的參考線，這上面是我們作為運動軌跡的參考線。
為什么我們使用Mixcut，因為現(xiàn)有的軟件不足以做到非常精細(xì)。
我們的觀點：我覺得傳統(tǒng)電影語言是一種習(xí)慣，沒有什么所謂的標(biāo)準(zhǔn)，第二我們的重慶全景公司技術(shù)永遠(yuǎn)在前進(jìn)，在想法上勇于嘗試是非常重要的，我們也有理由相信VR電影改變我們的觀影方式，畫幅被全景式的方式終結(jié)。
下一篇：VR全景助力“軍運村”