首頁>資訊 >
這屆冬奧會,虛擬人在為人類打工 2022-02-17 14:53:17  來源:36氪

虛擬人概念在2021年全網(wǎng)爆火,從時尚博主AYAYI到美妝達(dá)人柳夜熙再到清華大學(xué)虛擬學(xué)生華智冰,在抖音、小紅書等社交平臺上,虛擬人、虛擬偶像一度成為了“流量密碼”。

根據(jù)此前艾媒咨詢預(yù)計(jì),2021年中國虛擬偶像核心產(chǎn)業(yè)規(guī)模達(dá)62.2億元,而到2023年,有望突破200億元。

當(dāng)收割了大量流量之后,人們也開始提出疑問,除去噱頭之后,虛擬人帶來的商業(yè)想象力到底還剩多少?

除了無瑕偶像以外,虛擬人是否能為人類的生活中發(fā)揮出更多的社會價值?

意料之外的是,在2022年的冬奧會上,2021年爆火的虛擬人概念,獲得了廣泛應(yīng)用。

01虛擬人手語主播24小時服務(wù)2700萬特殊群體

近日,央視主持人朱廣權(quán)和AI虛擬人手語主播的一條pk短視頻引發(fā)了全網(wǎng)關(guān)注。

畫面中,朱廣權(quán)金句頻頻,語速驚人。

而一旁的虛擬人手語主播也是見招拆招,根據(jù)朱廣權(quán)的話同步即時進(jìn)行手語翻譯,最后圓滿成功完成了挑戰(zhàn)。

根據(jù)全國第二次殘疾人抽樣調(diào)查數(shù)據(jù),中國目前有2780萬聽障人士。

為了讓這些同樣也在關(guān)注冬奧盛事的聽障群體們,第一時間獲取比賽動態(tài)和感受賽場上的激情,百度智能云團(tuán)隊(duì)花了2個月的時間打造了這個虛擬人AI手語主播,從北京冬奧會開始,全年無休用AI智慧為聽障用戶提供手語服務(wù)。

在過去,我們從熒幕上看到的手語翻譯,大多是由真人完成。

打造一個手語數(shù)字人并不簡單,主要有三個難點(diǎn):

1、不同地區(qū)的手語各不相同,需要一套類似普通話通用版的手語。

2、手語的語序與正常說話的語序并不相同,虛擬人大多需要先進(jìn)行提煉和語序調(diào)整,再進(jìn)行翻譯。

3、手語不僅僅只是靠手部動作傳遞信息,表情、口型也是關(guān)鍵組成部分。虛擬人不僅要準(zhǔn)確地用手語進(jìn)行翻譯,還需要準(zhǔn)確地根據(jù)語境做出表情反饋。

普通翻譯講究信、達(dá)、雅,一個AI虛擬人手語翻譯,要像真正實(shí)現(xiàn)替代真人,就必須足夠智能。

百度打造的虛擬人手語主播之所以能夠拿下朱廣權(quán)的挑戰(zhàn),離不開各種技術(shù)的加成。

為了讓虛擬人聽得清主持人/解說員在講什么,百度方面利用了ASR語音識別模型幫助虛擬人主播準(zhǔn)確識別語音。

據(jù)報道,這一系統(tǒng)的準(zhǔn)確率高達(dá)98%,還能夠準(zhǔn)確識別方言、中英文混雜的情況。

為了讓虛擬人手語主播實(shí)現(xiàn)準(zhǔn)確的翻譯,百度在訓(xùn)練這一模型的時候,主要應(yīng)用了自然手語語料。

在我國,存在的手語種類超過百種,為了讓更多的聽障人士能夠看懂,央視新聞AI手語主播掌握的手語詞匯規(guī)范都來自《國家通用手語詞典》標(biāo)準(zhǔn),另外還添加了體育專有名詞、時政新聞、常用短句等特殊訓(xùn)練。

為了讓虛擬人通過表情進(jìn)行更加準(zhǔn)確的表達(dá)句意,百度智能云方面建立了一個擁有近萬個手語動作的動作庫,推動精準(zhǔn)手語表達(dá)實(shí)現(xiàn)。

在口型與表情上,百度智能云通過4D掃描數(shù)據(jù)進(jìn)行訓(xùn)練,為表情與口型進(jìn)行精準(zhǔn)矯正,總體上口型生成的準(zhǔn)確度超過98.5%。

當(dāng)然,除了百度的虛擬手語人主播以外,2月3日,由北京智譜華章科技有限公司、凌云光技術(shù)股份有限公司和北京廣播電視臺聯(lián)合打造的“冬奧手語播報數(shù)字人系統(tǒng)”也正式上線。

這一系統(tǒng)基于北京智源人工智能研究院“悟道2.0”超大智能模型進(jìn)行研發(fā),自主搭建多模態(tài)肢體動作、表情、手指同步采集系統(tǒng),目的也是方便殘障人士收看賽事報道,目前已經(jīng)在“冬奧賽事集錦”和“一起看冬奧”電視節(jié)目正式亮相。

智譜華章是清華大學(xué)計(jì)算機(jī)系知識工程實(shí)驗(yàn)室的技術(shù)成果轉(zhuǎn)化而來。

智譜AI合伙人左家平曾經(jīng)這樣評價虛擬手語人產(chǎn)品:“它類似于一個擁有了1.75萬億條知識的大腦。”

02 谷愛凌虛擬數(shù)字人跨界解說天氣預(yù)報虛擬主播上崗

今年冬奧的冰雪賽場上,谷愛凌是滑雪賽場上的實(shí)力金牌選手,賽場外,由中國移動通過最新的云計(jì)算技術(shù)打造的谷愛凌孿生虛擬人Meet GU也是忙得不可開交。

在冬奧會舉辦期間,Meet GU在咪咕冬奧賽事演播室中完成了滑雪賽事解說、播報及場景電商的虛擬互動等工作。

據(jù)報道,Meet Gu背后的技術(shù)主要是通過高質(zhì)量肢體及亞毫米級面部綁定,采用動補(bǔ)驅(qū)動亞毫米級數(shù)字人并達(dá)到4k質(zhì)量合成。

Meet Gu的外形、聲音,神情與妝容、毛孔細(xì)節(jié)、皮膚質(zhì)感都與谷愛凌本人1:1還原。

除了Meet GU之外,咪咕方面還打造了徐夢桃、隋文靜、韓聰、任子威等4名冰雪項(xiàng)目運(yùn)動員的虛擬數(shù)字人。

他們在冬奧會開幕前夕曾在2022年中國網(wǎng)絡(luò)視聽年度盛典上合唱了冰雪助威曲《準(zhǔn)備好》。

當(dāng)然,除了熱門IP的虛擬人在熒幕中亮相之外,一些實(shí)用場景的虛擬人也正在為人類減負(fù)。

在冬奧會開幕前十天,虛擬人氣象主播馮小殊在中國天氣WAP、張家口氣象公眾號等新媒體平臺上已經(jīng)正式上崗,為選手和觀眾們實(shí)時播報體感寒涼指數(shù)、穿衣指數(shù)、感冒指數(shù)、凍傷指數(shù)、防曬指數(shù)、護(hù)目鏡指數(shù)等氣象信息指標(biāo)。

虛擬氣象主播馮小殊由中國氣象局華風(fēng)氣象傳媒集團(tuán)聯(lián)合小冰公司打造,以“中國天氣”主持人馮殊為原型,依托小冰框架數(shù)字孿生虛擬人技術(shù)構(gòu)建。

通過一周的深度神經(jīng)網(wǎng)絡(luò)渲染技術(shù)及小樣本學(xué)習(xí)技術(shù),馮小殊出爐,從外貌、動作到神態(tài)與真人是真假難分。

03小結(jié)

開幕式上表演節(jié)目的洛天依、全年無休的手語主播、咪咕演播室里的谷愛凌數(shù)字分身、數(shù)字人版奧林匹克公益宣傳大使REAI、從冬奧開幕前10天就開始播報天氣的虛擬氣象主持人馮小殊……

在本次冬奧會現(xiàn)場,虛擬人已經(jīng)開始在為人類“打工”。

有業(yè)內(nèi)人士給出了這樣評價:冬奧會為虛擬數(shù)字人的應(yīng)用打造了一個絕佳的契機(jī)。

這場舉國歡慶的盛事,為虛擬人提供了一個走向千家萬戶的展示舞臺,讓人們知道虛擬人并不僅僅只是紙片人,也不光是智能局限于二次元的娛樂產(chǎn)物。

虛擬人已然是勢不可擋。

本文來自微信公眾號“科創(chuàng)最前線”(ID:kczqxgzh),作者:科創(chuàng)最前線,36氪經(jīng)授權(quán)發(fā)布。

關(guān)鍵詞:

相關(guān)閱讀:
熱點(diǎn)
圖片 圖片