導(dǎo)讀:虛擬人物市場正在興起,這些虛擬人物市場的背后,正是一代代技術(shù)的更迭。
最近,韓國人工智能公司Pulse9推出了一個完全由AI打造的韓國流行音樂女團(tuán),Eternity。Pulse9 通過該公司研發(fā)的“Deep Real”技術(shù)打造了11位AI女團(tuán)成員,并發(fā)布了單曲MV“I’m Real”。該單曲在YouTube上的播放量達(dá)到67萬。
Deep Real是指將AI設(shè)計(jì)的人物圖像與數(shù)據(jù)庫里的人類面部特征相結(jié)合,生成全新的虛擬人物圖像。與Deepfake不同,它并不會與現(xiàn)實(shí)生活中人們的臉部圖像進(jìn)行合成。虛擬人物市場正在興起,這些虛擬人物市場的背后,正是一代代技術(shù)的更迭。
一、首個全員AI女團(tuán),AI偶像即將進(jìn)軍影視業(yè)
2020年12月,Pulse 9發(fā)起了一個“令人激動人心的AI(AI heart-throb challenge)”的社交活動。人們在虛擬人物理想型測試中,從101位虛擬人物中選出最讓人心動的11位AI成員并組成AI女團(tuán)。像國內(nèi)的選秀節(jié)目《創(chuàng)造101》一樣,Pulse9打造了一個AI世界的“選秀女團(tuán)”。
Pulse 9成立于2017年,是一家人工智能技術(shù)開發(fā)公司。最初,Pulse 9專注于開展AI畫家的業(yè)務(wù),但AI畫家業(yè)務(wù)受疫情影響難以展開。此后,他們將AI圖像生成的業(yè)務(wù)從繪畫、產(chǎn)品定制等擴(kuò)展到娛樂業(yè)務(wù)。2021年4月,他們推出了Eternity女團(tuán),團(tuán)名Eternity(永恒)含有“成為與大眾永遠(yuǎn)在一起的最佳虛擬偶像”的意思,每位AI角色都有獨(dú)特的設(shè)定。
此外,2020年12月,Pulse 9還與泰國Good Drama公司簽約了《AI偶像進(jìn)軍泰國及進(jìn)軍電視劇產(chǎn)業(yè)的諒解備忘錄》,希望打開AI偶像的泰國市場和AI偶像影視業(yè)業(yè)務(wù)。
泰國Good Drama公司計(jì)劃投資7.4億韓元(約為420萬人民幣)制作一部名為“我親愛的AI(My Dear A.I)”的電視劇。這部電視劇主要講述男主角AI偶像與人類女性之間的愛情故事,Pulse 9負(fù)責(zé)制作AI男偶像。
“在韓國,虛擬偶像與人類交談和互動的時(shí)代正在開啟”,Pulse 9的CEO Park Ji-eun表示,而她作為創(chuàng)造者,將會賦予AI偶像更具幻想和更具創(chuàng)造性的特點(diǎn)。
同時(shí)她還表示,與真人偶像不同,AI偶像可以自由表達(dá)自己的觀點(diǎn)。因?yàn)槿藗儗I偶像更具包容性,而AI偶像對人們的惡意評論和批評承受度也更強(qiáng)。
值得一提的是,Pulse 9制作的所有AI偶像都是虛擬人物,在現(xiàn)實(shí)世界中難以找到相同的樣貌,在一定程度上避開了肖像權(quán)糾紛。
二、與“Deepfake”不同,Deep Real打造的“臉”查無此人
Pulse 9通過該公司自主研發(fā)的Deep Real技術(shù)打造了11位AI女團(tuán)成員。
Deep Real技術(shù)可以通過人工智能創(chuàng)建虛擬人、物體、室內(nèi)空間、生物以及虛擬自然環(huán)境等?,F(xiàn)有的虛擬偶像多數(shù)是動畫師長時(shí)間人工設(shè)計(jì),逐幀創(chuàng)建圖像,打造AI視頻。但Deep Real技術(shù)擺脫了現(xiàn)有虛擬角色創(chuàng)作的面部設(shè)計(jì)和動作等限制作時(shí)間長,運(yùn)營成本高等困境,使用AI模型來生成虛擬人物。Pulse 9公司報(bào)道,他們通過Deep Real技術(shù)可調(diào)整虛擬偶像的眼神、面部表情、嘴角等各處細(xì)節(jié),使其與真人的外貌、表情都達(dá)到高度相似。
Pulse 9先通過AI技術(shù)創(chuàng)建了新的虛擬人物圖像,然后他們通過AI模型將虛擬人物圖像與數(shù)據(jù)庫里的參考人物圖像的面部特征進(jìn)行合成,得到了一個全新的虛擬人物圖像。由AI設(shè)計(jì)的虛擬人物圖像與真實(shí)世界的人不會重合。
Pulse 9 強(qiáng)調(diào),Deep Real不同于現(xiàn)有的Deepfake,因?yàn)樗院侠淼某杀緞?chuàng)造了逼真的虛擬人物,而不是通過合成真人臉部。他們認(rèn)為,Deep Real技術(shù)的操作過程會更加復(fù)雜。
Deepfake是指一類深度造假的換臉技術(shù),將A的臉換到B身上。通過人臉互換,它可以讓A做出來自己從沒有做過的動作,說過一些沒說過的話,造成以假亂真的效果。
Deepfake以深度學(xué)習(xí)技術(shù)為基礎(chǔ)。通過上傳被替換的“原圖”和合成后的“假圖”到生成對抗性網(wǎng)絡(luò)(GAN)模型中,當(dāng)圖像的逼真度足夠高時(shí),該圖像就會被輸出。然后,AI模型再通過提取視頻關(guān)鍵幀,人臉對齊等技術(shù),讓人臉完美“融合”到原視頻。這類視頻仿真度高、欺騙性強(qiáng),肉眼一般難以識別真?zhèn)巍?/p>
2017 年底,一位名為“Deepfake”的Reddit用戶,將神奇女俠女主角的臉成功替換到其他電影上,這個“逼真”的視頻轟動一時(shí)。
隨后,有關(guān)人士將Deepfake的開源代碼發(fā)布在Github上,其較低的技術(shù)門檻讓非專業(yè)人士也能快速掌握Deepfake。
2019年8月31日,國內(nèi)軟件ZAO憑借著“僅需一張照片,出演天下好戲”口號迅速在網(wǎng)絡(luò)走紅,短短三天后占據(jù)了蘋果應(yīng)用商店免費(fèi)排行榜的第一名。但由于其用戶條款違法、非法收集用戶生物信息、侵權(quán)等問題,ZAO于9月3日迅速下架。
Deepfake的出現(xiàn),盡管會在聲音合成、視影音領(lǐng)域的修復(fù)上有所幫助,但具有較大的安全隱患。一段子虛烏有的視頻不但會讓有關(guān)人士名譽(yù)權(quán)受損,而且還會引起市場動蕩,甚至威脅國家安全。
2019年11月,我國發(fā)布了《網(wǎng)絡(luò)音視頻信息服務(wù)管理規(guī)定》,該規(guī)定明確指出:網(wǎng)絡(luò)音視頻信息服務(wù)提供者應(yīng)當(dāng)部署違法違規(guī)音視頻以及非真實(shí)音視頻鑒別的相關(guān)技術(shù)方案。
同時(shí),全球各地也都開始了抵制Deepfake的“戰(zhàn)斗”。
2019年9月,F(xiàn)acebook宣布了全球Deepfake檢測挑戰(zhàn)賽,旨在號召研究人員尋找“打假”的有效方法,提升鑒別假視頻的技術(shù),維護(hù)和諧的網(wǎng)絡(luò)環(huán)境。
隨后,Google AI 開源 Deepfake 視頻檢測數(shù)據(jù)集,希望能幫助研究者找到更好的鑒別假視頻的方法。
美國加州隨后也頒布相關(guān)條令,禁止發(fā)布、傳播Deepfake類視頻;禁止在大選期間,使用競選者圖像制造Deepfake類的假視頻。
盡管各方動作不斷,但事實(shí)上,由Deepfake制造的假視頻仍在各平臺屢禁不止,給人們帶來困擾。
與Deepfake的戰(zhàn)斗,還一直在繼續(xù)。
三、虛擬人物迭代3.0, 市場總額高達(dá)2000億元
據(jù)愛奇藝發(fā)布了《2019虛擬偶像觀察報(bào)告》顯示,中國二次元用戶規(guī)模達(dá)到4.9億,有3.9億人走在關(guān)注虛擬偶像的路上,2020年中國虛擬偶像市場總產(chǎn)量達(dá)到2000億元。
最早的虛擬人物通過歌唱軟件與機(jī)器人系統(tǒng)疊加形成能“唱歌的機(jī)器人”,從而衍生出電子音樂、鬼畜文化等多元文化。
隨后,2.0虛擬偶像文化全面爆發(fā),洛天依、初音未來等通過合成軟件聲源和擬人化形象的虛擬偶像在二次元形成“現(xiàn)象級”出圈,開始以虛擬偶像的身份參與各類商業(yè)活動。虛擬人物行業(yè)初具規(guī)模。
▲來源于B站2020初音未來:未來有你線上AR演唱會
目前,虛擬偶像迎來3.0時(shí)代,通過人物3D建模、AI合成技術(shù),虛擬偶像們脫離之前的動漫人物、軟萌的卡通類的外表,逐漸像一個真正的“人”,Eternity正是如此。
此外,虛擬人物在其他領(lǐng)域也具有各展身手。
今年兩會期間,央視網(wǎng)的數(shù)字虛擬小編小 C在兩會節(jié)目中作為記者,與梁倩娟、馬慧娟等全國人大代表進(jìn)行獨(dú)家對話。
▲圖為虛擬小編“小C”,來源百度AI
虛擬小編的背后是百度智能云為其提供技術(shù)支持,百度智能云將數(shù)字人技術(shù)與云計(jì)算技術(shù)相結(jié)合,支持“小C”在AI驅(qū)動和人工監(jiān)管雙重模式,希望給數(shù)字人賦予“人類溫度”。同時(shí),百度利用其強(qiáng)大的數(shù)據(jù)庫作為支撐,第一次使用了4D掃描技術(shù)來進(jìn)行高精度面部數(shù)據(jù)采集,并運(yùn)用AI技術(shù)定進(jìn)行了反復(fù)的迭代調(diào)優(yōu),讓“小C”能夠更加活靈活現(xiàn)地與人交流。
三星在2020年也推出了虛擬人項(xiàng)目。該團(tuán)隊(duì)通過Core R3技術(shù),創(chuàng)造了Neon。項(xiàng)目負(fù)責(zé)人普脈·米斯特里(Pranav Mistry)發(fā)推文說,Core R3技術(shù)“現(xiàn)在可以自主創(chuàng)建新的表情,新的動作,新的對話,與原始數(shù)據(jù)完全不同?!?/p>
而其中最具特色的虛擬人物,莫過于6月1日在智源大會出現(xiàn)的中國首位原創(chuàng)虛擬學(xué)生“華智冰”。
“華智冰”是智源“悟道2.0”模型、小冰AI完全框架、智譜AI數(shù)據(jù)與知識雙驅(qū)動的AI框架三方聯(lián)手打造的虛擬人物。“她”拜清華?學(xué)教授唐杰為師,進(jìn)入清華實(shí)驗(yàn)室學(xué)習(xí)。具有思考和回答復(fù)雜問題的能力,能將新知識融合到自己的模型中去,從而不斷地提升自己的學(xué)習(xí)能力,建立自己的知識庫。
與多數(shù)主打外貌的虛擬偶像不同,“華智冰”作為虛擬學(xué)生,更重視虛擬人物的“內(nèi)在”,注重AI的學(xué)習(xí)能力和可成長性。(內(nèi)在美更重要?。?/p>
▲圖為“華智冰”,中國首位虛擬學(xué)生,來自B站“清華大學(xué)”賬號
盡管人們對虛擬數(shù)字人技術(shù)一直抱有較高的期待,但目前的虛擬數(shù)字人仍有一定的不足之處。
目前,虛擬人物產(chǎn)業(yè)投入成本高,收入低,并且在技術(shù)、內(nèi)容等問題上都不夠成熟,目前大多數(shù)公司對虛擬人物投入,都難以盈利。
虛擬人物的時(shí)代還尚未完全到來。
結(jié)語:通過虛擬人物看“元宇宙”,虛擬和現(xiàn)實(shí)如何“和諧”相融
虛擬偶像、虛擬主播、虛擬數(shù)字人隨著科技的進(jìn)步逐一呈現(xiàn)在我們面前。如今,虛擬世界已經(jīng)擁有了虛擬人物的“入駐”?!霸钪妗笔澜缢坪跬ㄟ^這些虛擬人物構(gòu)建了一個基本框架,向我們展開了一個全新的世界。
隨著AI和VR技術(shù)的不斷提升,真與假之間界限已經(jīng)逐漸模糊。許多軟件都非常希望收集各類人體生物數(shù)據(jù),但卻難以保證用戶隱私安全。Deepfake的出現(xiàn)正是一個“警鐘”——無論是怎樣的世界,秩序安全都是必不可少的。
如果像Deepfake這般的深度偽造技術(shù),人們都難以尋找到有效的方法解決。那么,虛擬世界與現(xiàn)實(shí)世界的快速相融則會帶來更多的困境,讓人們逐漸失去對現(xiàn)實(shí)世界的信任感,從而進(jìn)一步加劇社會孤獨(dú)。
如何在現(xiàn)有體系里平衡虛擬人物和真實(shí)人物的關(guān)系,把握好現(xiàn)實(shí)和虛擬的界限,我們還有待探尋。