央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

5月2日,在央視新聞頻道的特別報(bào)道中,虛擬主持人“康曉輝”與央視記者江凱共同主持《直播長江》安徽篇,并在現(xiàn)場進(jìn)行實(shí)時互動。

屏幕上這位讓觀眾“似曾相識”的虛擬主持人——“康曉輝”,他的形象是基于央視主持人康輝的外形,通過相芯科技FaceUnity的虛擬形象生成(P2A)技術(shù)創(chuàng)建的,并通過虛擬形象驅(qū)動技術(shù)實(shí)現(xiàn)實(shí)時驅(qū)動。而他的聲音是通過科大訊飛旗下的訊飛智聲平臺的AI語音合成技術(shù)對康輝老師的聲音進(jìn)行合成模擬的。此次相芯科技和科大訊飛聯(lián)手打造的虛擬主持人,讓觀眾們能聞其聲,也見其人。

虛擬主持人的形象是怎么創(chuàng)建的?

一張照片就夠了

虛擬主持人的,創(chuàng)建過程比所有人想象的都要簡單,相芯科技僅使用了一張央視主持人康輝的照片,通過相芯科技的P2A(Photo-to-Avatar)技術(shù),直接生成了全動態(tài)的虛擬主持人“康曉輝”。這項(xiàng)技術(shù)打破了人們以往對虛擬形象技術(shù)需要特殊硬件設(shè)備和高昂成本的距離感,而是只需普通攝像頭和一張自拍,便可在97%的Android機(jī)型、iOS平臺、PC端實(shí)現(xiàn)與好萊塢CG特效媲美的效果。

也就是說,普通用戶在自己的手機(jī)里就能創(chuàng)建自己的虛擬形象。在生成3D虛擬形象后,還能根據(jù)用戶的實(shí)際需求,對虛擬形象的服裝、造型、環(huán)境光線、背景等進(jìn)行個性化自定義,并提供真人版和卡通版兩種風(fēng)格。

央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

  ▲央視主持人康輝 和 虛擬主持人“康曉輝”

虛擬主持人的實(shí)時驅(qū)動

從新聞畫面里可以了解到,虛擬主持人“康曉輝”在播報(bào)內(nèi)容的過程中,能做出和真人一樣的口型、表情等變化,頭部也能做出點(diǎn)頭、搖頭等一系列動作,這些并不是提前做好的動畫,而是可以實(shí)時操控的。這個實(shí)時驅(qū)動就是通過相芯科技的虛擬形象驅(qū)動技術(shù)實(shí)現(xiàn)的。

相芯科技通過智能人臉檢測,精確捕捉面部肌肉運(yùn)動節(jié)點(diǎn)并標(biāo)記特征點(diǎn)(眼睛、口鼻、眉毛、面部輪廓等),獲取面部表情系數(shù)并將表情同步至3D虛擬形象面部,從而驅(qū)動3D虛擬形象。在直播期間,工作人員通過筆記本上的攝像頭,拍攝他的視頻影像,在屏幕上的虛擬主持人就能實(shí)時逼真地還原工作人員做出的表情動作。這項(xiàng)技術(shù)同樣只需要普通攝像頭就能實(shí)現(xiàn)。

未來,人人都有自己的虛擬形象

央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技

未來,人們在社交網(wǎng)絡(luò)上不再滿足于用一串字符、一個ID、一張圖片詮釋自己,而希望用黑科技創(chuàng)造出一個說話、長相、甚至行為與本人高度一致的虛擬形象。而隨著技術(shù)的不斷推進(jìn),虛擬形象的創(chuàng)建已經(jīng)不再需要依賴專業(yè)的硬件設(shè)施和高昂的成本,普通用戶在手機(jī)上就可以輕松實(shí)現(xiàn)。相芯科技的虛擬形象技術(shù)已在視頻社交、虛擬偶像、游戲等泛娛樂領(lǐng)域得到廣泛應(yīng)用,也在醫(yī)療、在線教育、智能商業(yè)領(lǐng)域開始嶄露頭角。相芯科技相信,在未來,每個人都將擁有這種實(shí)時、互動、智能的虛擬形象,作為自己在虛擬世界的化身,成為自己專屬的數(shù)字資產(chǎn)。

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2018-05-10
央視虛擬主持人,隱藏著相芯用一張照片實(shí)現(xiàn)的黑科技
5月2日,在央視新聞頻道的特別報(bào)道中,虛擬主持人“康曉輝”與央視記者江凱共同主持《直播長江》安徽篇,并在現(xiàn)場進(jìn)行實(shí)時互動。

長按掃碼 閱讀全文