《AI智能與影視制作分析》由會(huì)員分享,可在線閱讀,更多相關(guān)《AI智能與影視制作分析(6頁(yè)珍藏版)》請(qǐng)?jiān)谘b配圖網(wǎng)上搜索。
1、AI智能與影視制作分析
關(guān)鍵詞:AI智能;影視制作
一、引言
人工智能技術(shù)可以多方面的模擬人腦的思維,人工智能的出現(xiàn)不僅是提高人們生活質(zhì)量與生活層次的產(chǎn)物,同時(shí)也是社會(huì)進(jìn)步和發(fā)展的必然結(jié)果。隨著人工智能技術(shù)的快速發(fā)展,影視內(nèi)容制作現(xiàn)在與人工智能已經(jīng)逐漸結(jié)合并且結(jié)合的效果也已經(jīng)有了一定的起色,無(wú)論是自動(dòng)配音環(huán)節(jié),還是自動(dòng)生成字幕環(huán)節(jié)都還需要人工將其全部完成,在當(dāng)前形勢(shì)下,人工智能技術(shù)已經(jīng)逐漸與其相結(jié)合。尤其是對(duì)于一些高質(zhì)量的影視制作,通過(guò)結(jié)合人工智能技術(shù)可以在提高效率的同時(shí),滿足用戶對(duì)影視內(nèi)容個(gè)性化的需求。為此,在影視制作領(lǐng)域要全面推廣對(duì)AI智能技術(shù)
2、的應(yīng)用。
二、人工智能介入影視后期制作的條件
(一)建立有效的影像辭典
《西蒙尼》主要是由美國(guó)一家電影公司所發(fā)行的,電影的內(nèi)容主要就是將主角要離開(kāi)劇組,導(dǎo)演利用數(shù)字虛擬化的方式合成一個(gè)女明星,也就是電影名字西蒙尼。電影的這個(gè)影像過(guò)程都是采用數(shù)字虛擬技術(shù),導(dǎo)演創(chuàng)造出了一個(gè)沒(méi)有任何人可以取代的一個(gè)女主角,使女主角西蒙尼身上積聚了所有讓人羨慕的屬性。如果說(shuō)導(dǎo)演制作了一個(gè)性質(zhì)相對(duì)比較簡(jiǎn)單的電影假象,對(duì)于人工智能介入的數(shù)字化剪輯來(lái)講,影像辭典在建立過(guò)程中會(huì)更加的復(fù)雜。要采集海量的影視素材,并對(duì)素材急性分析,這只是屬于一個(gè)輸入、計(jì)算學(xué)習(xí)的過(guò)程。例如對(duì)于大量的
3、影視素材,都需要將其分割成多個(gè)小段,按照樹(shù)形的結(jié)構(gòu)將已經(jīng)分割成的各個(gè)小段進(jìn)行劃分,在私有類別里,定義為肖似代碼層面的,則不需要進(jìn)行改正和調(diào)整,較為簡(jiǎn)單化,對(duì)于共有類別里,需要選擇一個(gè)相應(yīng)鏡頭組相接的參數(shù),如:鏡頭類型、速率等,其他類型的鏡頭,都可以采用同一種風(fēng)格作為參照的標(biāo)注,加以統(tǒng)一化的處理,這種表示主要就是針對(duì)試聽(tīng)語(yǔ)言自身所具有的獨(dú)特優(yōu)勢(shì)。針對(duì)新拍攝的素材,數(shù)字剪輯師在整個(gè)工作過(guò)程中需要采用一種方式進(jìn)行處理和分析,同時(shí)還要結(jié)合原版的影響詞典進(jìn)行分析,利用計(jì)算機(jī)根據(jù)客戶給出要求將其剪輯成片,對(duì)于已經(jīng)剪輯好的成片也要被一起記錄在整個(gè)影像詞典中,完善整個(gè)影像詞典的特效和質(zhì)量。
(
4、二)對(duì)于視聽(tīng)語(yǔ)言進(jìn)行深度學(xué)習(xí)
為了保障人工智能技術(shù)可以更加順暢介入到影像后期的剪輯中,就是保障計(jì)算機(jī)在意素層面中對(duì)整個(gè)影像情況進(jìn)行深入性的分析和研究,簡(jiǎn)單來(lái)講,就是利用計(jì)算機(jī)將影像內(nèi)容全部讀懂,將意素的屬性以及意素之間相存在的聯(lián)系全部理解透徹。安德烈巴贊深入研究影像場(chǎng)景的調(diào)度情況時(shí),就有一個(gè)非常典型的案例,在電影《公民凱恩》中最具有代表的一幕就是,演員蘇珊有了輕生的想法,凱恩需要在這個(gè)時(shí)候立即沖到演員蘇珊的屋內(nèi),阻止他輕生的行為。這一幕只用了一個(gè)鏡頭進(jìn)行表示。在人工智能技術(shù)下,將這一幕劃分成若干個(gè)鏡頭,例如:蘇珊臉色非常慘白,郁郁寡歡,床頭有玻璃杯、安眠藥片,凱恩迅速跑道蘇珊的
5、房間內(nèi),蘇珊臉色更加慘白,這樣也可以表述出上一幕所要表達(dá)的意思。這個(gè)案例被安德烈巴贊用在了鏡頭調(diào)度的研究中華,在整個(gè)過(guò)程中應(yīng)用人工智能技術(shù),可以深入研究像后期介入的具體操作情況進(jìn)行研究。另外,人工智能技術(shù)需要在讀懂鏡頭里意素的同時(shí),還要根據(jù)人物的心理狀態(tài)和神態(tài)對(duì)鏡頭之間的銜接做好預(yù)測(cè)和判斷,確保呈現(xiàn)出的影像畫面是完整的。
三、智能媒體制作的應(yīng)用案例分析
在科學(xué)技術(shù)迅速發(fā)展的背景下,網(wǎng)絡(luò)新媒體發(fā)生了巨大的變化,開(kāi)始借助人工智能技術(shù)對(duì)視頻內(nèi)容進(jìn)行智能化的便捷和生產(chǎn),主要采用的人工智能技術(shù)包括:人臉/人體的智能編輯技術(shù)、物體/場(chǎng)景的智能生成技術(shù)、跨模態(tài)內(nèi)容匹配生成技術(shù)
6、。
(一)人臉/人體的智能編輯技術(shù)
無(wú)論是人臉、還是人體動(dòng)作的特效在整個(gè)視覺(jué)作品中都起著至關(guān)重要的作用,對(duì)于傳統(tǒng)的影視為了營(yíng)造一種良好的特效,需要依附在整個(gè)后期制作和圖形的計(jì)算中,生成式對(duì)抗神經(jīng)網(wǎng)絡(luò)GAN的出現(xiàn),打開(kāi)了人臉的智能生成、智能編輯的新思路[1]。在一般情況下,人臉生成都是采用GAN的變體模型在這個(gè)實(shí)際操作過(guò)程中采用編碼-解碼器的結(jié)構(gòu)進(jìn)行操作,通過(guò)特征碼來(lái)體現(xiàn)人臉的相關(guān)屬性,例如:臉形、表情、姿勢(shì)等,這樣就可以使神經(jīng)網(wǎng)絡(luò)學(xué)習(xí)有關(guān)人臉屬性分布特征碼之間所存在的緊湊映射性的關(guān)系。對(duì)于映射關(guān)系,用戶對(duì)其屬性可以隨意的進(jìn)行控制,并采用生產(chǎn)新的臉型或者是人臉做出
7、符合整個(gè)影視作品中鄋需要的動(dòng)作、特效、表情,可以確保整個(gè)畫面的完整性。對(duì)于DeepFake技術(shù),在特定的條件下,可以對(duì)短視頻中的人臉根據(jù)整個(gè)影像畫面的需求進(jìn)行修飾,該技術(shù)雖然在應(yīng)用過(guò)程中還無(wú)法達(dá)到電影制作商所提出的相關(guān)要求和標(biāo)準(zhǔn),但是有很多的影視制作公司已經(jīng)開(kāi)始對(duì)人臉/人體的智能編輯采用低成本的深度學(xué)習(xí)方法來(lái)將其應(yīng)用在影視作品中,提高整個(gè)影視作品的視覺(jué)感。
(二)物體/場(chǎng)景的智能生成技術(shù)
圖像生成技術(shù)的應(yīng)用可以有效產(chǎn)生出圖片特定的一種物體,產(chǎn)生出與視頻相關(guān)的背景和影像?!癇igGAN”技術(shù)就可以利用獨(dú)立的模型產(chǎn)生出相關(guān)的圖片,并且圖片的質(zhì)量非常高,對(duì)于同一種不同
8、實(shí)體總所存在的多樣性可以采用截?cái)嗟牟僮鬟M(jìn)行控制,GAN的變體可以利用GAN、通過(guò)文字的形式來(lái)生成出更具有準(zhǔn)確性的圖像。同時(shí)也可以單一物體的形象特征進(jìn)行描述,例如:例如有一匹駿馬,駿馬的毛發(fā)是紅棕色,馬蹄是黑色,尾巴比較短,或者是采用多個(gè)實(shí)體組合成不同的場(chǎng)景進(jìn)行描述,例如:有三個(gè)滑雪者都背著書包從高處的雪山坡上劃過(guò)[2]。無(wú)論是對(duì)文字的分析,還是圖像生成模型的技術(shù)都屬于目前新型的一種人工智能技術(shù),通過(guò)對(duì)不同的數(shù)據(jù)集進(jìn)行訓(xùn)練,可以更加滿足對(duì)于文字的描述和講解,從而形成一種單一化的實(shí)體生成,還可以采用多體的場(chǎng)景使其形成一種圖像。利用圖像操縱類GAN,就可以直接對(duì)實(shí)體的邊緣情況進(jìn)行分析,根據(jù)分析結(jié)果設(shè)
9、定一個(gè)簡(jiǎn)單的輪廓,進(jìn)而生成一種高質(zhì)量的實(shí)體圖像。以上這些技術(shù)應(yīng)用在影視內(nèi)容制作上都可以起到顯著的效果,提供大量的具有個(gè)性化特性的示例圖像素材,譬如在演播室的桌子上可以將不同的電視節(jié)目經(jīng)過(guò)簡(jiǎn)單的操作生成出有關(guān)不同節(jié)目的裝飾物,這樣在很大程度上減少了人工制作素材的成本,節(jié)省了大量的人力和物力,全面提升整個(gè)影像視頻所獲取的經(jīng)濟(jì)效益。
(三)跨模態(tài)的匹配生成技術(shù)
跨媒體內(nèi)容生成主要就是指在學(xué)習(xí)的基礎(chǔ)上與不同的模態(tài)媒體內(nèi)容中的低維特征相匹配,低維特征具有相似語(yǔ)義的特性,例如:像表征物體的像素集合,單詞等;能夠有效降不同模態(tài)之間、媒體內(nèi)容中所存在的高維結(jié)構(gòu)性匹配進(jìn)行有效的完
10、成,例如:多物體、多層次的圖像、語(yǔ)句等,從而完整最終的內(nèi)容生成和轉(zhuǎn)化。在當(dāng)前網(wǎng)絡(luò)媒體節(jié)目制作中已經(jīng)有兩種技術(shù)被廣泛應(yīng)用,一種是總結(jié)型媒體內(nèi)容生成,以圖像到文本生成為主,包括圖像描述、視頻描述等,應(yīng)用實(shí)例有自動(dòng)體育視頻解說(shuō),新聞稿件自動(dòng)生成器等。另一種是想象型媒體內(nèi)容生成,以文本到圖像生成為主,包括文本-圖像、文本-視頻生成、文本-音頻生成等。應(yīng)用實(shí)例有圖像內(nèi)容編輯,以本文輸入為主;虛擬人物樂(lè)器演奏視頻,以音頻信息生成為主。第二種技術(shù)與第一種技術(shù)的生成特性恰恰相反,想象型媒體內(nèi)容生成屬于擴(kuò)展信息、聯(lián)想信息的一個(gè)主要過(guò)程中,簡(jiǎn)單來(lái)講,與以往的媒體內(nèi)容對(duì)比可知,將要生成的內(nèi)容所包含的信息量非常的大,
11、這種方法在實(shí)際應(yīng)用的過(guò)程中都需要具備海量的配對(duì)訓(xùn)練數(shù)據(jù),在對(duì)抗生成網(wǎng)絡(luò)的基礎(chǔ)上對(duì)生成媒體內(nèi)容構(gòu)建模型,適合應(yīng)用在對(duì)互動(dòng)創(chuàng)意視頻內(nèi)容的智能制作中。
四、人工智能技術(shù)與應(yīng)用在影視行業(yè)的發(fā)展
(一)人工智能對(duì)創(chuàng)意與編劇的影響
首先是創(chuàng)意編劇階段。2018年依靠人工智能技術(shù)創(chuàng)作了一部小說(shuō),叫《哈利波特和看起來(lái)像一大坨灰燼的肖像》,在人類看來(lái)這完全不像是正常的詞語(yǔ),但就是這樣一本小說(shuō),在全世界的零零后里引起了巨大的反響,它帶著機(jī)械性的語(yǔ)言已經(jīng)成為一種新時(shí)尚。還有《Sunspring》這部出現(xiàn)在去年倫敦科幻電影節(jié)上的影片,也是由人工智能創(chuàng)作的。以上例子是人工
12、智能在創(chuàng)意階段所做的一些嘗試、一些工作。
(二)人工智能對(duì)制作的影響
在制作階段,有些技術(shù)目前已經(jīng)很成熟了?,F(xiàn)在的體育比賽、現(xiàn)場(chǎng)秀和新聞節(jié)目中,攝像機(jī)的軌跡很多都是通過(guò)人工智能的大數(shù)據(jù)分析在驅(qū)動(dòng)的。包括剪輯這樣的制作環(huán)節(jié),它的背后都有人工智能的驅(qū)動(dòng)以保證最快的實(shí)效性。關(guān)于具體的圖像處理技術(shù),比如說(shuō)NVIDIA新發(fā)布的RTX顯卡,它通過(guò)人工智能的降噪完成光線追蹤的實(shí)時(shí)處理;再比如說(shuō)程序化紋理,在傳統(tǒng)三維技術(shù)里面生成成本相對(duì)比較高的環(huán)節(jié)都可以通過(guò)人工智能去幫助實(shí)現(xiàn)。以及涵蓋了面部捕捉和表情捕捉的動(dòng)作捕捉技術(shù),在好萊塢電影《復(fù)仇者聯(lián)盟》和《星球大戰(zhàn)俠盜一號(hào)》等影片中所
13、呈現(xiàn)的虛擬角色的背后都有人工智能在驅(qū)動(dòng)。還有聲音后期制作的例子,所有內(nèi)容相關(guān)的處理都有人工智能的嘗試在其中。到了所謂觸達(dá)階段,我們現(xiàn)在用的一個(gè)詞叫觸達(dá),是因?yàn)楝F(xiàn)在影視內(nèi)容的呈現(xiàn)方式不再是確定的銀幕或者屏幕,從現(xiàn)在的多屏融合到未來(lái)的VR。目前國(guó)內(nèi)的各大視頻平臺(tái),內(nèi)容推送的背后都有大數(shù)據(jù)的支持。例如Netflix的項(xiàng)目,從立項(xiàng)到研發(fā),背后都有人工智能數(shù)據(jù)的支撐。人工智能技術(shù)在影視行業(yè)中有些內(nèi)容已經(jīng)在應(yīng)用階段了,有些內(nèi)容還處在實(shí)驗(yàn)階段,例如谷歌、NVIDIA也不斷會(huì)有一些實(shí)驗(yàn)室階段的技術(shù)出現(xiàn)。
五、人工智能與電影未來(lái)
在當(dāng)前社會(huì)形態(tài)下,人工智能技術(shù)已經(jīng)被廣泛應(yīng)用,在科
14、幻片中可以看到人工智能。例如:警匪片、偵探片等,將不清楚的畫面進(jìn)行放大,提高整個(gè)影像的清晰度,人工智能技術(shù)在以前是完全不可能實(shí)現(xiàn)的,但是現(xiàn)在我們已經(jīng)實(shí)現(xiàn)了對(duì)人工智能技術(shù)的應(yīng)用。人工智能技術(shù)應(yīng)用在電影中可以對(duì)我們?nèi)宋锉砬榈木庉嬏峁└嗟目赡苄院筒僮餍浴K约夹g(shù)發(fā)展共同的特性就是滿足人類發(fā)展過(guò)程中的需求,使人類可以將需要?jiǎng)?chuàng)造的內(nèi)容和影像變得更加簡(jiǎn)單、容易,在整個(gè)操作的過(guò)程中也不需要長(zhǎng)時(shí)間的訓(xùn)練和調(diào)整。人工智能技術(shù)的出現(xiàn),我們每一個(gè)人都像是擁有一個(gè)人工智能助理,可以在很大程度上滿足我們創(chuàng)造過(guò)程中的實(shí)際需求。人工智能技術(shù)的發(fā)展不僅可以給我們的影視行業(yè)帶來(lái)更多的變化,激發(fā)人們的創(chuàng)作積極性和主動(dòng)性,甚至還
15、可以改變?nèi)伺c人之間的溝通方式,利用人工智能技術(shù)將我們內(nèi)心所想要表達(dá)的想法全部表達(dá)出來(lái)。相信,在人工智能的領(lǐng)導(dǎo)下新時(shí)代會(huì)很快就來(lái)臨。
六、結(jié)束語(yǔ)
綜上所述,人工智能技術(shù)應(yīng)用在影視制作中具有較高的應(yīng)用價(jià)值。科學(xué)、合理的應(yīng)用人工智能技術(shù)能夠有效改善長(zhǎng)期以來(lái)我國(guó)傳統(tǒng)網(wǎng)絡(luò)技術(shù)的狀態(tài),改變了傳統(tǒng)全人工式的內(nèi)容制作模式,提高了人們的生活質(zhì)量和工作效率,同時(shí)也能夠準(zhǔn)確預(yù)測(cè)劇本拍成電影是否可以獲得更多的經(jīng)濟(jì)效益。例如:ScriptBook系統(tǒng),它屬于一種目前新型的一種高等技術(shù),包含數(shù)據(jù)分析、處理、算則算法等環(huán)節(jié),含有6500個(gè)以上劇本,同時(shí)它還具有對(duì)市場(chǎng)的應(yīng)變能力,在自由數(shù)據(jù)庫(kù)中
16、可以對(duì)新型數(shù)據(jù)進(jìn)行綜合的判定。創(chuàng)始人Azermai表示,ScriptBook預(yù)測(cè)的準(zhǔn)確性至少比人類高三倍。人工智能技術(shù)在性能的改變上還有非常大的進(jìn)步空間,對(duì)于藝術(shù)創(chuàng)作在目前還不能完全被人工智能所取代,因?yàn)樗囆g(shù)創(chuàng)造是需要?jiǎng)?chuàng)新的,人的思維是發(fā)散性的,而人工智能技術(shù)是人類在藝術(shù)創(chuàng)作中所賦予的一種特殊能力。
參考文獻(xiàn):
[1]鄧濤,王代強(qiáng).淺談?dòng)耙曀囆g(shù)創(chuàng)作中的大數(shù)據(jù)智能算法分析與運(yùn)用[J].藝術(shù)科技,2019,32(22):18-19.
[2]毛琦.技術(shù)主義與契約機(jī)制:基于社會(huì)學(xué)意義的電影數(shù)據(jù)管理體系研究[J].現(xiàn)代傳播,2019,41(8):133-138.