簡單、快捷、低成本的超寫實虛擬人平臺來了……
IP蛋炒飯:泛IP時代的思想、方法和案例
加微信SXSZZZ,進IP蛋炒飯社群

這是IP蛋炒飯開伙的第122篇文章,
全文約4860字。
關(guān)鍵詞:超寫實虛擬人平臺 人工智能 百度
這篇承接上周文章,繼續(xù)探討數(shù)字虛擬人大爆發(fā)前的必要條件。
雖然數(shù)字虛擬人越來越受關(guān)注,但如果要迎來大爆發(fā),虛擬偶像甚至能部分替代頻頻爆雷的真人偶像地位,還需要新平臺的出現(xiàn)。
因為,數(shù)字虛擬人從表面上看是一種娛樂,但本質(zhì)上,數(shù)字虛擬人是新的網(wǎng)絡(luò)應(yīng)用服務(wù),像社交、電商、外賣一樣,需要強大專門的、專為虛擬人/虛擬偶像服務(wù)的平臺。
新平臺首先要做到:將打造超寫實數(shù)字虛擬人的高門檻、高投入真正降下來,變成普及化服務(wù)。
解決現(xiàn)在如果想開發(fā)超寫實虛擬人,花費很貴、難以實時直播、也無法快速批量生產(chǎn)內(nèi)容等諸多問題。
比如一些超寫實的數(shù)字虛擬人,目前也只是能做到發(fā)幾張圖片的程度,做到視頻的很少,既少也不足。
某高知名度的新消費品牌,推出了廣受好評的品牌虛擬人形象,但公布的也只是一張圖片,據(jù)蛋炒飯了解還在非常初期的階段,并沒有真正進入到動態(tài)內(nèi)容開發(fā)。
目前市場上的虛擬偶像天團,只是幾家娛樂大公司的燒錢游戲,一個4人虛擬偶像天團,可以在短短幾年內(nèi)燒掉近億元的資金,而且還遠沒有達到高仿真的程度。
這些都亟待新平臺的出現(xiàn)來解決,而眾多巨頭都在進行布局。
我最近發(fā)現(xiàn),新發(fā)布的百度智能云“數(shù)字明星運營平臺與燦星計劃”,有可能就是這樣的平臺,它正是朝著讓超寫實虛擬人開發(fā),變得更簡單快捷、更低成本、更易運營這一方向去的。
簡而言之,百度“數(shù)字明星運營平臺”能做到:
用AI智能的方式,
快速打造數(shù)字虛擬偶像
打造的虛擬偶像既有3D超寫實的、直接在真人基礎(chǔ)上生成的,也有半寫實或二維的、寵物化的,都能做到高效、快速生成。而且是一體化智能平臺,既能打造IP也能運營IP,和我期望的新平臺非常接近。
就在8月18號,和央視新聞聯(lián)合舉辦的“百度世界2021”上,已經(jīng)展示了幾個典范案例,包括將央視著名主持人、真人明星龔俊都變成了數(shù)字虛擬人,以及Q版的火星車數(shù)字人等,展現(xiàn)了各種可能和場景。


“數(shù)字明星運營平臺”的黑科技非常多、待我一一道來。
01
用簡單快捷的4D掃描+人工智能, 直接打造超寫實虛擬人
目前的超寫實虛擬人開發(fā)實在是太麻煩了——1、高精度原畫設(shè)計;2、高寫實3D建模;3、導(dǎo)入高水準(zhǔn)的虛擬人引擎;4、高精度動捕;5、高精致的修幀渲染;這個流程還沒包括人工智能,只做出形象和動作而已。
這必然導(dǎo)致成本高昂、流程復(fù)雜,不懂行的人根本做不好。
而在“數(shù)字明星運營平臺”上,情況會有重大改變:你可以不用去找CG公司做3D建模,也能打造出足夠漂亮、足夠高仿真的AI智能虛擬人。
因為平臺會通過4D掃描技術(shù)+人工智能,把你找到的真人變成有智慧的超寫實虛擬人。

你只需找到符合自己要求的真人美女帥哥,當(dāng)然孩子和老人也行,剩下的事情,就是由平臺來幫你轉(zhuǎn)化為超寫實虛擬人,節(jié)省大量精力時間,也肯定比開發(fā)3D高仿真模型要省錢。
千萬不要小看這件事,這意味著,哪怕你不是做動畫的、不是做3D的、甚至不是做IP的,也可以開發(fā)出足夠好的超寫實虛擬人。
這也意味著,任何網(wǎng)紅也能直接把自己變成數(shù)字虛擬人了,而無需繁瑣的建模工作,具有極為廣闊的應(yīng)用領(lǐng)域。
根據(jù)我拿到的第一手資料,描述一下這個開發(fā)過程:
第一步,用高精度4D掃描技術(shù),對人體進行全方位掃描,捕捉真人的細膩表現(xiàn)。
第二步,用人工智能機器深度學(xué)習(xí)掃描數(shù)據(jù),并用人工智能算法組合驅(qū)動豐富真實的實時面部表現(xiàn),從而超高精度還原真人模特。

數(shù)字虛擬人的動態(tài)精模,
顯著提升虛擬偶像“真情實感”的品質(zhì)
其實我以前見過用掃描生成的3D人,但由于沒有結(jié)合人工智能,表情很不自然,尤其是口型失真,做出來的只是泥塑木雕的3D升級版而已。
所以結(jié)合人工智能進行深度學(xué)習(xí)和算法非常重要,只有結(jié)合了AI,3D人才可能顯得有“真情實感”,才有資格稱為“虛擬人”。

這是百度用4D掃描+人工智能所做的龔俊數(shù)字人,盡可能還原真人偶像的氣質(zhì)和魅力。

這是百度為央視網(wǎng)開發(fā)的全新升級版數(shù)字人小C,也作為奧運信息搜羅官,出現(xiàn)在剛剛結(jié)束的奧運會上。
第三步,設(shè)定五個關(guān)鍵維度,即表情、口型、毛發(fā)、布料、身型,來打造超寫實虛擬明星,尤其是加入了表情可變的口型合成算法,讓用戶觀感更親切自然,徹底解決口型和表情失真的問題。

數(shù)字虛擬人的口型與表情配合,
用AI解決口型+表情容易失真的問題。

毛發(fā)、布料與身形,
盡可能細膩、自然和豐富。
總之,只要有真人模特,平臺就能幫你做出盡可能真實、自然、精細,以及實時驅(qū)動的虛擬偶像。
02
只需高精度照片,或攝像頭,就能生成超寫實虛擬人。
上一種方法還需要真人模特,和專門的高精度掃描。
平臺還有更極致的簡單快捷辦法:用標(biāo)準(zhǔn)人像照片或攝像頭來生成。這種方法只需要高精度照片或視頻。

方法1:你提供從單張或多張高精度照片,上傳到平臺,由平臺生成超寫實虛擬人的模型。
方法2:你也可以通過高精度攝像頭進行面部捕捉和動作捕捉,上傳到平臺,同樣也能生成超寫實虛擬人的模型。
方法3:直接提供高精度視頻也可以。
當(dāng)然,要做出超寫實虛擬人不只這么簡單,平臺還需要從妝容、發(fā)型、服裝、音色等各個方面進行再調(diào)節(jié),通過5個維度、15項參數(shù),不斷裝扮出新鮮感。

在這背后,平臺需要建立豐富的妝容庫、發(fā)型庫和衣柜,以及各種音色庫供選擇。
還有一個趣點:為了保證虛擬人不會做出不雅觀的表現(xiàn),平臺專門設(shè)計了基于AI技術(shù)的數(shù)字人表情管理引擎,確保各種虛擬人的驅(qū)動表現(xiàn)儀態(tài)大方:)
總之,一張照片就有可能生成一個虛擬人IP,然后發(fā)展為一個百變的虛擬明星。
我發(fā)現(xiàn)這樣做,不僅是在造星,還意味著所有經(jīng)典的、甚至是去世的真人明星、偶像,只要獲得家屬的授權(quán)許可,也能直接轉(zhuǎn)化為數(shù)字虛擬明星,繼續(xù)唱歌、跳舞和演出……
這有點永生的感覺,在元宇宙的虛擬世界里,生者與逝者,永遠繼續(xù)生活在一起……
03
一句話生成形象IP
說出來等于做出來
這是比前兩種方式更極致簡單的方式:讓普通人可以用一句話的簡單描述,即可自動生成個性化3D虛擬數(shù)字形象。
你只需說出你想要的形象,說等于做,說出來就是做起來。
比如——
1. 你用語言描述形象的五官特征或者服飾,例如:幫我生成一個大眼睛的穿著裙子的女生。
2. 你也可以用形容詞描述形象,例如:幫我生成一個英俊、幽默的虛擬形象。
3. 你還可以指定明星或職業(yè)等形象,例如:幫我生成一個長得像xx明星的虛擬形象,等等。
然后,平臺系統(tǒng)就幫你生成、實現(xiàn)出來,然后不斷調(diào)整、優(yōu)化。
“一句話生成”的設(shè)想,準(zhǔn)備在百度Apollo智能車聯(lián)的新一代車載虛擬智能助手中落地。
設(shè)想一下,你作為老司機,你只需動動嘴,描述出來,就可以輕松擁有一個專屬的虛擬形象助手,非常有趣、非常高效,而且生成的汽車虛擬助手也很多樣化和個性化。
這背后的黑科技,是百度增強現(xiàn)實技術(shù)部正在研發(fā)的3D虛擬形象智能化生成方案,通過在語音識別、自然語言處理、知識圖譜和增強現(xiàn)實等技術(shù)方面的深厚積累和跨模態(tài)多技術(shù)融合,加上海量的人物知識數(shù)據(jù),才有可能實現(xiàn)。
現(xiàn)在正在建立的是——
1)專屬虛擬形象知識庫,實現(xiàn)對虛擬形象全維度的特征描述;
2)基于人臉圖片的形象重建、特征提取,實現(xiàn)用戶專屬個性特征的實時復(fù)刻;
3)基于語音/自然語言處理實現(xiàn)多輪對話式自然交互,使得用戶交互更加友好高效。
我認為“一句話生成形象”的應(yīng)用場景遠遠不只是車載助手——
比如購物者可以一句話生成自己希望的虛擬導(dǎo)購員;學(xué)生可以一句話生成自己希望的虛擬教師;游客可以一句話生成自己希望的虛擬導(dǎo)游;甚至宅男宅女可以一句話生成自己的夢中情人……
這些都是在科幻電影電視劇中出現(xiàn)的設(shè)想,很快就會來臨。
活在當(dāng)下,就是活在未來……
04
用AI增強
IP角色的表達力
前面介紹的都是如何生成IP形象,下面的則是如何增加IP角色的表現(xiàn)魅力來快速打造內(nèi)容。
這對短視頻制作尤其有用。
比如AI演同款,就是用AI技術(shù)自動學(xué)習(xí)熱?短視頻,結(jié)合自己的IP角色,就能一鍵生成表演同款視頻了。

又比如TTS視頻,TTS指的是文字演繹,你只要輸入一段動作描述文字,就能自動生成一條相應(yīng)動作的短視頻。

又比如AI唱歌,通過TTS轉(zhuǎn)化唱歌,虛擬人的口型、表情、動作都自動與歌曲合拍。
又比如AI跳舞,可以通過對2D動畫的舞蹈進行動作識別,再讓3D人物學(xué)會跳舞。

還有AI動效,通過圖像識別技術(shù),匹配UI動效,增加角色的趣味性。
以及AI換臉,如果品牌更換代言人,可以直接在原有內(nèi)容上,更換品牌代言人的臉,快速生成運營內(nèi)容。
以上這些,顯然都能極大簡化虛擬人短視頻生產(chǎn)的復(fù)雜度,甚至做到一鍵生成,這樣一來,虛擬人短視頻就能具備和真人視頻比產(chǎn)量、比速度的能力。
傳統(tǒng)動畫視頻的生產(chǎn)制作都是相當(dāng)緩慢的,即使想做快也快不到哪里去,往往還過于簡陋。
而結(jié)合AI增強的虛擬人視頻演繹,將有機會開啟一個超級生產(chǎn)的時代。這對現(xiàn)在的短視頻制作生態(tài)有相當(dāng)大的顛覆作用,也對未來產(chǎn)生不可估量的影響。
05
充分兼容導(dǎo)入
已有3D/2D模型
這意味著——現(xiàn)在已有的眾多3D、2D動漫角色,可以直接在平臺上轉(zhuǎn)化為自己專屬的數(shù)字虛擬人,省去了IP創(chuàng)作方的再開發(fā)時間。
也就意味著,現(xiàn)有眾多高創(chuàng)作力、低技術(shù)能力的IP開發(fā)方,直接具備轉(zhuǎn)化自己的IP為虛擬人的能力,可以無需建模、快速做出自己的數(shù)字虛擬人,甚至是虛擬偶像。
設(shè)想一下到未來,從喜羊羊灰太狼到熊出沒光頭強,從哪吒到姜子牙,從許仙到白蛇青蛇,從刺客伍六七到非人哉、全職高手,都能彼此交互的場景吧。
這將開啟全IP的虛擬世界……
“數(shù)字明星運營平臺”上的其他功能,還包括20位現(xiàn)成虛擬偶像,讓你可以先不急著打造新的IP,直接在平臺上選擇,快速一分鐘上崗。

以及三種驅(qū)動模式:AI驅(qū)動、擬合驅(qū)動和真人驅(qū)動,讓你既可以不需要真人直接用AI智能驅(qū)動,也可以用真人在背后進行“中之人”演繹。

還有豐富的數(shù)字資產(chǎn)庫,包括多種風(fēng)格類型的場景庫、讓鏡頭表達更自由的機位鏡頭庫、道具庫(包括動態(tài)道具)、貼紙庫、音效庫、服裝庫、發(fā)型庫、表情庫、動作庫等等。
這些都很直觀易懂,不必做詳細介紹。
06
IP運營平臺
與
燦星計劃
“數(shù)字明星運營平臺”不只能開發(fā)IP,還能運營IP,是一體化智能的閉環(huán)體系。
而“燦星計劃”是可以和所有現(xiàn)有IP運營者進行合作的計劃。
簡單來說,就是通過平臺的支持,讓不具備制作和運營數(shù)字虛擬人的IP開發(fā)者、眾多品牌,直接具備開發(fā)和運營能力。
從而增加IP所有者的各種收入。


比如,可以通過平臺進行IP直播帶貨、IP直播社交、還可以進行IP商業(yè)演出、進行IP廣告代言、IP聯(lián)名,甚至可以讓IP參演各種影視。
既可以合入百度現(xiàn)有的商業(yè)生態(tài)里,進行比如開屏廣告、信息流廣告、直播賣貨和聯(lián)名營銷等,也可以在百度之外的平臺上進行。
平臺還建立了三維虛擬演播室系統(tǒng),可以直接將虛擬人IP內(nèi)容,推流到各大平臺,而且不限于在百度,當(dāng)然,在百度生態(tài)內(nèi)還會有流量扶持計劃。
所有這些,都是通過“數(shù)字明星平臺”,用最簡單、快捷的方式實現(xiàn)。

從現(xiàn)在到未來,數(shù)字虛擬人有兩種最重要的表達:
1. 一個是“代表我”:在社交娛樂等領(lǐng)域,虛擬形象成為人們創(chuàng)造個性化分身的基礎(chǔ)設(shè)施,在不同場合下,讓人們充分表達自我,釋放個性。
2.二個是“服務(wù)我”:各種服務(wù)趨向個性化、定制化,虛擬形象作為服務(wù)的實體化表現(xiàn),有機會成為人們的私人助理、朋友甚至伴侶,為用戶提供情緒價值和實用價值,參與用戶的生活。
前者是用戶個人的虛擬人化,后者是品牌、商業(yè)服務(wù)的虛擬人化,共同構(gòu)成了未來的元宇宙。
一個能簡化數(shù)字虛擬人創(chuàng)意生產(chǎn)制作的新平臺,能充分幫助實現(xiàn)這一切,產(chǎn)生無限的可能。
當(dāng)平臺讓數(shù)字虛擬人的開發(fā)和運營,變得簡單、快捷、高效和低價時,就有可能實現(xiàn)——眾多品牌+眾多創(chuàng)意小團隊+個人創(chuàng)造者的共贏生態(tài)平臺。
數(shù)字虛擬人才能夠成為互聯(lián)網(wǎng)的基礎(chǔ)服務(wù),實現(xiàn)從購物到娛樂、從教育到新聞、從內(nèi)容到社交的大爆發(fā),一直到元宇宙……虛擬人是元宇宙的奠基石。
作者:陳格雷(老小格)及團隊
《超級IP孵化原理》作者,品牌IP孵化人
加微信SXSZZZ,了解更多的虛擬人平臺信息
參考文章:

「小圓桌」實戰(zhàn)型IP研習(xí)會
IP培訓(xùn)、品牌IP實戰(zhàn)演習(xí)、項目交流
有興趣的企業(yè)可加微信SXSZZZ……
俺的小書店開業(yè)了
可買到俺親筆簽名的《超級IP孵化原理》

每一本都有作者親筆簽名,歡迎掃碼購買

已有超過20多家頂級IP和品牌將此書作為案頭工具
歡迎合作IP咨詢、IP營銷培訓(xùn)、品牌IP開發(fā)
點擊可參見過往培訓(xùn)咨詢通道:微信SXSZZZ或致電15910881406




轉(zhuǎn)載請在文章開頭和結(jié)尾顯眼處標(biāo)注:作者、出處和鏈接。不按規(guī)范轉(zhuǎn)載侵權(quán)必究。
未經(jīng)授權(quán)嚴(yán)禁轉(zhuǎn)載,授權(quán)事宜請聯(lián)系作者本人,侵權(quán)必究。
本文禁止轉(zhuǎn)載,侵權(quán)必究。
授權(quán)事宜請至數(shù)英微信公眾號(ID: digitaling) 后臺授權(quán),侵權(quán)必究。



評論
評論
推薦評論
暫無評論哦,快來評論一下吧!
全部評論(0條)