9月5日-9日,2020年中國(guó)國(guó)際服務(wù)貿(mào)易交易會(huì)(以下簡(jiǎn)稱(chēng):服貿(mào)會(huì))在京舉辦,深圳天盟智能互動(dòng)科技有限公司攜行業(yè)領(lǐng)先的RT-AIHS(Real Time-AI Head Swapping, 實(shí)時(shí)人工智能頭部替換)技術(shù)參加本次服貿(mào)會(huì),并將其應(yīng)用于時(shí)下火熱的直播領(lǐng)域。

利用深度合成技術(shù)規(guī)避企業(yè)損失
當(dāng)前,以大數(shù)據(jù)、虛擬現(xiàn)實(shí)、AI人工智能、物聯(lián)網(wǎng)等為核心的新科技無(wú)一不在顛覆著人們?cè)O(shè)計(jì)和創(chuàng)造事物的方式。短視頻與直播帶貨已經(jīng)成為近兩年來(lái)一直熱度不減的話(huà)題,針對(duì)短視頻拍攝與直播帶貨產(chǎn)生的主播職業(yè),現(xiàn)在也形成了一套完整的主播培養(yǎng)體系。但是當(dāng)MCN機(jī)構(gòu)投入大量的人力物力培養(yǎng)出一個(gè)成熟的主播之后,爆紅的網(wǎng)紅或藝人跳槽也幾乎成為所有MCN機(jī)構(gòu)面臨的風(fēng)險(xiǎn)。而無(wú)論是針對(duì)MCN機(jī)構(gòu)由于主播人員流失而造成的收益受損問(wèn)題,還是經(jīng)紀(jì)公司由于明星流失而造成的流量受損問(wèn)題,RT-AIHS應(yīng)用,可以幫助這些公司將損失降到最低。

-服貿(mào)會(huì)現(xiàn)場(chǎng)利用RT-AIHS技術(shù)直播-
RT-AIHS依托的深度合成技術(shù)(Deep Synthesis),是由天盟智能互動(dòng)科技的母公司天工未來(lái)科技建立的一套機(jī)器深度學(xué)習(xí)影像算法模型,主要基于自動(dòng)編碼機(jī)(autoencoders)和生成對(duì)抗網(wǎng)絡(luò)(generative adversarialnetworks, “GAN”)等AI技術(shù)。自動(dòng)編碼機(jī)是一個(gè)人工神經(jīng)網(wǎng)絡(luò),被訓(xùn)練來(lái)對(duì)輸入數(shù)據(jù)進(jìn)行重建,以實(shí)現(xiàn)數(shù)據(jù)合成。GAN由兩組相互對(duì)抗的人工神經(jīng)網(wǎng)絡(luò)組成,其中一個(gè)網(wǎng)絡(luò)負(fù)責(zé)生成數(shù)據(jù)、另一個(gè)負(fù)責(zé)鑒別;在機(jī)器通過(guò)數(shù)百萬(wàn)次的學(xué)習(xí)、迭代下,最終GAN被訓(xùn)練為可以對(duì)視頻、實(shí)時(shí)影像的人臉進(jìn)行高度逼真的渲染,從而合成保真的信息內(nèi)容。簡(jiǎn)而言之,深度合成其實(shí)就是通過(guò)對(duì)人臉數(shù)據(jù)鑒別從而完成人臉數(shù)據(jù)的重建并渲染出高度逼真的新的人臉的過(guò)程。
在短期內(nèi),深度合成已經(jīng)作用于娛樂(lè)和社交領(lǐng)域,極大的提高了直播、短視頻和游戲的實(shí)時(shí)后期處理水平,優(yōu)化了用戶(hù)體驗(yàn)。而著眼于長(zhǎng)遠(yuǎn)發(fā)展,深度合成的仿真技術(shù)可以通過(guò)用戶(hù)的創(chuàng)作性創(chuàng)造出超越現(xiàn)實(shí)的素材,拓展人類(lèi)的視覺(jué)想象邊界,帶來(lái)全新的娛樂(lè)體驗(yàn),滿(mǎn)足用戶(hù)的好奇心和新鮮感。

實(shí)時(shí)換臉催生新的運(yùn)營(yíng)模式
實(shí)時(shí)人工智能頭部替換算法(RT-AIHS)指的是依托天工未來(lái)科技在計(jì)算機(jī)視覺(jué)與人工智能最新前沿技術(shù)深度研究與開(kāi)發(fā)并結(jié)合超過(guò)十五年影像后期制作領(lǐng)域的豐富經(jīng)驗(yàn)而形成的云計(jì)算和5G傳輸?shù)燃夹g(shù)手段,并由天盟智能互動(dòng)科技實(shí)現(xiàn)了實(shí)時(shí)高精度頭部替換的商業(yè)化應(yīng)用開(kāi)發(fā),從而提升直播、游戲、短視頻行業(yè)的生產(chǎn)效率和傳播效果。
對(duì)于現(xiàn)在的主播行業(yè)來(lái)說(shuō),無(wú)論是粉絲還是所謂的“路人”觀眾,大家在看直播的時(shí)候更多的是對(duì)于主播“臉”的關(guān)注。在以往的情況下,如果主播離開(kāi)公司,則再也沒(méi)有辦法用他進(jìn)行直播。但是依托于RT-AIHS技術(shù),即使主播離開(kāi),企業(yè)也可以結(jié)合聲音的變換技術(shù),在其離開(kāi)的情況下完成直播工作。對(duì)MCN機(jī)構(gòu)來(lái)說(shuō)相較于再去培養(yǎng)一個(gè)成熟的主播,培養(yǎng)一個(gè)直播技術(shù)人員就能直接替換掉原先離開(kāi)的主播,無(wú)論從時(shí)間成本還是金錢(qián)成本來(lái)考慮,都更容易的多。

-工作人員進(jìn)行技術(shù)調(diào)試-
事實(shí)上,換臉技術(shù)在娛樂(lè)領(lǐng)域的運(yùn)用并不是“頭一遭”,之前也有運(yùn)用在影視制作中的案例,但是RT-AIHS應(yīng)用與以往換臉技術(shù)的不同之處在于他的實(shí)時(shí)性、高效性以及高質(zhì)量這幾個(gè)特點(diǎn)。用傳統(tǒng)辦法替換掉影視劇中演員的臉要從建模開(kāi)始,并且經(jīng)歷一系列的后期制作過(guò)程才能完成,相較于RT-AIHS應(yīng)用進(jìn)行的換臉技術(shù)需要幾十倍上百倍的人力去做,花費(fèi)很長(zhǎng)時(shí)間之后完成的成片也不一定能得到很好的效果。而RT-AIHS應(yīng)用可以讓我們用很少的人力,在盡可能短的時(shí)間內(nèi)實(shí)現(xiàn)人臉替換,并以更高的質(zhì)量保證影視劇能更早的呈現(xiàn)在觀眾面前。
打造永不流失的“三次元”明星
隨著新一代科技革命和產(chǎn)業(yè)變革的發(fā)展浪潮,人工智能新技術(shù)日新月異并觸動(dòng)著全球神經(jīng)。此次服貿(mào)會(huì)上,天盟智能同時(shí)為大家?guī)?lái)了同樣基于深度合成開(kāi)發(fā)的AIFG(AI Face Generation)技術(shù),通過(guò)對(duì)人臉面部信息的關(guān)鍵數(shù)據(jù)進(jìn)行提取,隨機(jī)生成人臉圖像供用戶(hù)進(jìn)行選擇。基于目前市場(chǎng)上存在的藝人、網(wǎng)紅等資源流失的現(xiàn)象,AIFG技術(shù)可以為用戶(hù)提供全新的解決方案——打造“三次元明星”。

-深圳天盟智能互動(dòng)科技有限公司首席技術(shù)官趙文韜做技術(shù)指導(dǎo)-
與真人明星相比,“三次元”明星不會(huì)出現(xiàn)約滿(mǎn)跳槽、負(fù)面新聞或因個(gè)人品德及意外事故導(dǎo)致機(jī)構(gòu)損失的風(fēng)險(xiǎn);與“二次元”明星相比,他可以自主學(xué)習(xí)、迭代更新、自動(dòng)修正,直接與粉絲進(jìn)行實(shí)時(shí)互動(dòng)等。通過(guò)AIFG技術(shù),“三次元”明星能夠突破表演者的技能限制,通過(guò)自主設(shè)定人物外形、性格特征以及特殊技能,利用不同虛擬場(chǎng)景及特效配合,使得人物更加生動(dòng)有趣,視覺(jué)感受全面升級(jí)。
對(duì)于企業(yè)來(lái)說(shuō),“三次元”明星可從現(xiàn)有的動(dòng)畫(huà)后期制作和動(dòng)作捕捉升級(jí)成實(shí)時(shí)合成,縮短制作周期,從而有效的控制企業(yè)成本;通過(guò)自身特定的標(biāo)簽,甚至可以捕獲精準(zhǔn)的粉絲群體,為企業(yè)帶來(lái)流量扶持。
AIFG技術(shù)發(fā)展到今天,“三次元”明星作為一種新的形態(tài)將在視頻領(lǐng)域發(fā)揮重要的作用,應(yīng)用范圍也將越來(lái)越廣,他具備強(qiáng)大的吸引力和創(chuàng)新力,給現(xiàn)有人物IP創(chuàng)作空間帶來(lái)全新的詮釋?zhuān)矊橹辈ァ⒍桃曨l、音樂(lè)和游戲行業(yè)帶來(lái)新的機(jī)遇。

-左:深圳天盟智能互動(dòng)科技有限公首席運(yùn)營(yíng)官饒卿–
-右:深圳天盟智能互動(dòng)科技有限公司首席技術(shù)官趙文韜-
AI技術(shù)在影視制作中的運(yùn)用或許不是影視后期制作發(fā)展的主流,但是以更少的預(yù)算和時(shí)間去完成更高質(zhì)量的制作一直是影視后期制作發(fā)展的趨勢(shì)。技術(shù)革新給我們帶來(lái)的一定是經(jīng)濟(jì)效益的增加,而對(duì)于影視制作和其他娛樂(lè)相關(guān)領(lǐng)域,任何能創(chuàng)造效益的技術(shù)都是因?yàn)樗梢愿咝А⒈憬荨⒏哔|(zhì)量的服務(wù)于人或公司。