在第四屆中國(guó)“互聯(lián)網(wǎng)+”大學(xué)生創(chuàng)新創(chuàng)業(yè)大賽冠軍爭(zhēng)奪賽上，來(lái)自北京郵電大學(xué)的“人工智能影視制作——聚力維度”項(xiàng)目，堪稱(chēng)影視制作“黑科技”，它可以將2D電影實(shí)時(shí)地直接轉(zhuǎn)換成3D，效率提升1000倍，打破了傳統(tǒng)3D影視制作高成本、耗時(shí)間的問(wèn)題。在此次大賽中，獲得亞軍。
崢嶸平臺(tái)由聚力維度的科幻成真實(shí)驗(yàn)室歷時(shí)3年之久研發(fā)完成，主要用于畫(huà)面品質(zhì)達(dá)院線(xiàn)級(jí)標(biāo)準(zhǔn)的3D內(nèi)容制作。
《阿凡達(dá)》上映之后，3D電影在大眾領(lǐng)域從“陌生”轉(zhuǎn)為“熟悉”。很多人都看過(guò)3D電影，但僅有很少人知道3D電影如何制作。主流的3D電影制作采用2D轉(zhuǎn)3D方式。因?yàn)槭褂?D雙目攝像機(jī)實(shí)拍，不僅成本高、周期長(zhǎng)、移動(dòng)不便，而且在拍攝特寫(xiě)、逆光、運(yùn)動(dòng)等鏡頭上也有限制。崢嶸平臺(tái)的誕生則徹底顛覆了傳統(tǒng)2D轉(zhuǎn)3D技術(shù)。
用傳統(tǒng)2D轉(zhuǎn)3D技術(shù)制作一幀立體畫(huà)面，是一個(gè)繁瑣且耗時(shí)間的過(guò)程，要經(jīng)過(guò)圖像分割、灰度繪制、背景補(bǔ)圖、渲染合成至少4個(gè)步驟。
舉例來(lái)說(shuō)，將一張正對(duì)鏡頭的面部特寫(xiě)圖片制作成立體圖片，一個(gè)人類(lèi)立體設(shè)計(jì)師需要先用傳統(tǒng)3D轉(zhuǎn)制軟件里的分割工具，將人物的面部從鼻尖、鼻翼、顴骨、耳根再到頭發(fā)，像用ps摳圖一樣分別依次分割;再給分割出來(lái)的每一層依次賦予灰度值，也就是賦予單個(gè)部分立體感;然后將單張圖片依據(jù)左右眼視角進(jìn)行平移，并將平移后的空白部分補(bǔ)充完整;最后將左右視角圖與灰度圖渲染合成
傳統(tǒng)轉(zhuǎn)3D面部立體手工分割工序
繁瑣如此，也才僅僅得到一幀圖片中一張人物面部的立體圖像，更別提含有多人以及多層次背景的影視場(chǎng)景。
傳統(tǒng)轉(zhuǎn)3D復(fù)雜場(chǎng)景手工分割工序
然而，使用人工智能2D轉(zhuǎn)3D平臺(tái)崢嶸，則只需將這張圖片上傳給平臺(tái)，就可以實(shí)時(shí)得到一張結(jié)構(gòu)精細(xì)的立體圖。
崢嶸平臺(tái)主要基于人工智能技術(shù)，其核心是從單目圖像中恢復(fù)出整個(gè)場(chǎng)景的三維結(jié)構(gòu)。與應(yīng)用在安防、自動(dòng)駕駛、金融、醫(yī)療領(lǐng)域的目標(biāo)檢測(cè)或目標(biāo)分割等技術(shù)相比，崢嶸平臺(tái)是在用機(jī)器做人的視覺(jué)。
首先，其輸出的結(jié)果是影視畫(huà)面，與安防、金融、醫(yī)療等應(yīng)用相比，主要服務(wù)于人類(lèi)的觀(guān)看體驗(yàn)。
其次，人眼對(duì)所觀(guān)看的影視畫(huà)面要求很高，并希望從中獲得愉悅感。崢嶸平臺(tái)輸出的影視畫(huà)面需要做到三維空間關(guān)系精細(xì)、穩(wěn)定且漂亮。如果每張圖片的立體結(jié)構(gòu)不一致，合成的完整視頻就有可能造成同一人物在同一場(chǎng)景、位置出現(xiàn)抖動(dòng)。即便很輕微，也可能使人眩暈。但在安防或自動(dòng)駕駛領(lǐng)域，機(jī)器鎖定目標(biāo)后，并不必清晰的將其呈現(xiàn)給人看。檢測(cè)框圍繞目標(biāo)的輕微抖動(dòng)是被允許的，只要不影響最終結(jié)果判斷。
第三，崢嶸平臺(tái)不僅要像人類(lèi)一樣能“看”到影視內(nèi)容，并且要立體化影視內(nèi)容中的萬(wàn)事萬(wàn)物，三維重建影視畫(huà)面中的所有類(lèi)別。
對(duì)于普通人來(lái)說(shuō)，運(yùn)用這個(gè)3D制作平臺(tái)，就可以在短時(shí)間內(nèi)學(xué)會(huì)制作動(dòng)畫(huà)，制作效果甚至可以達(dá)到院線(xiàn)級(jí)水平。
基于該平臺(tái)的3D直播技術(shù)，能對(duì)電視劇、綜藝甚至?xí)r效性強(qiáng)的新聞、體育賽事等進(jìn)行實(shí)時(shí)3D轉(zhuǎn)換。此外，3D瀏覽器能將所有普通網(wǎng)頁(yè)實(shí)時(shí)轉(zhuǎn)換成3D網(wǎng)頁(yè)。除了2D轉(zhuǎn)3D，聚力維度也在圍繞前期拍攝、后期制作、特效動(dòng)畫(huà)等可以用人工智能優(yōu)化甚至顛覆的影視制作方向進(jìn)行研究，致力開(kāi)創(chuàng)人工智能影視制作新紀(jì)元。
