近年來(lái)，5G通信技術(shù)與AI技術(shù)的發(fā)展將視頻行業(yè)推向了一個(gè)新高潮，視頻行業(yè)的發(fā)展也愈發(fā)與人工智能技術(shù)緊密結(jié)合。為此，易有料特別邀請(qǐng)了網(wǎng)易杭州研究院的高級(jí)產(chǎn)品經(jīng)理陸徳，在易有料舉辦的“有料小館”沙龍中做了有關(guān)“AI視頻內(nèi)容理解技術(shù)的實(shí)踐”的主題分享。作為“有料知識(shí)官”，陸徳在演講中圍繞視頻生產(chǎn)、視頻管理、視頻分發(fā)、視頻互動(dòng)這四個(gè)模塊，展示了AI技術(shù)如何賦能內(nèi)容運(yùn)營(yíng)、如何助力品牌內(nèi)容營(yíng)銷數(shù)字化。
視頻內(nèi)容生產(chǎn)實(shí)現(xiàn)自動(dòng)化
在短視頻場(chǎng)景中，橫屏視頻會(huì)被調(diào)整成適配手機(jī)豎屏的尺寸，傳統(tǒng)方式是通過(guò)填充黑邊，但會(huì)影響視頻整體美觀度。因此，為滿足用戶的沉浸式內(nèi)容體驗(yàn)，可以使用目標(biāo)檢測(cè)和鏡頭預(yù)測(cè)技術(shù)識(shí)別視頻主體，保留視頻主體來(lái)自動(dòng)切割豎版視頻。AI內(nèi)容理解技術(shù)還可以用于字幕自動(dòng)生成環(huán)節(jié)，利用該技術(shù)自動(dòng)生成帶有時(shí)間戳的字幕位置，用戶可以在對(duì)應(yīng)的位置上作編輯，還可以一鍵導(dǎo)出字幕文件，方便后續(xù)視頻壓制。
AI技術(shù)應(yīng)用于視頻內(nèi)容管理
視頻管理最核心的能力是為視頻打標(biāo)簽，網(wǎng)易杭州研究院的AI視頻標(biāo)簽體系已經(jīng)支持三級(jí)1.2萬(wàn)+個(gè)標(biāo)簽，包括明星識(shí)別、動(dòng)漫識(shí)別、行為動(dòng)作識(shí)別、情緒識(shí)別等等，目前也在與易有料一起探索自訓(xùn)練能力。在音樂播放器邊聽邊看的場(chǎng)景中，要確保字幕跟音樂播放的歌詞相匹配，可以運(yùn)用圖像領(lǐng)域OCR技術(shù)，通過(guò)畫面中的圖形識(shí)別相應(yīng)的文字。音頻內(nèi)容理解方面，運(yùn)用AI技術(shù)對(duì)原始音頻進(jìn)行識(shí)別，對(duì)說(shuō)話的對(duì)象、語(yǔ)種、聲音事件進(jìn)行標(biāo)記，聲音事件主要根據(jù)不同業(yè)務(wù)領(lǐng)域進(jìn)行定制，進(jìn)一步規(guī)避有風(fēng)險(xiǎn)的內(nèi)容。
視頻內(nèi)容智能推薦與智能檢索
在內(nèi)容社區(qū)推薦場(chǎng)景中，運(yùn)用AI技術(shù)還可以為大量視頻提供內(nèi)容標(biāo)簽，擴(kuò)大視頻個(gè)性化推薦內(nèi)容池。基于視頻指紋技術(shù)實(shí)現(xiàn)“以影搜影”與版權(quán)保護(hù)，視頻指紋在業(yè)界又被稱為視頻DNA，為每一個(gè)視頻抽取唯一的特征進(jìn)行識(shí)別。在海量的視頻中，其中大部分創(chuàng)作者會(huì)采用其他來(lái)源的素材形成重復(fù)性比較高的視頻，因此可以通過(guò)視頻指紋技術(shù)去實(shí)現(xiàn)視頻的去重和原創(chuàng)保護(hù)。視頻指紋同樣可用于視頻檢索，用戶搜視頻一般是通過(guò)文字匹配標(biāo)簽，而使用了該技術(shù)，用戶便可以上傳影視片段來(lái)搜索出完整的視頻。
直播場(chǎng)景下的AI內(nèi)容理解技術(shù)應(yīng)用
視頻互動(dòng)主要發(fā)生在直播場(chǎng)景，目前直播有兩個(gè)痛點(diǎn)：實(shí)時(shí)直播內(nèi)容與封面無(wú)關(guān)，造成跳出率高;封面無(wú)法實(shí)時(shí)自動(dòng)更新，會(huì)損失一部分的用戶點(diǎn)擊。通過(guò)AI技術(shù)來(lái)實(shí)現(xiàn)“高光封面”，在視頻流和直播流的過(guò)程中，通過(guò)對(duì)視頻、圖像等內(nèi)容的理解，從豐富度、圖像質(zhì)量、精彩程度和吸引程度等多方面進(jìn)行分析，同時(shí)結(jié)合時(shí)序和音頻輔助判斷，截取主播當(dāng)前最精彩片段生成靜態(tài)、動(dòng)態(tài)封面。
多項(xiàng)AI能力賦能社區(qū)視頻業(yè)務(wù)，能為社區(qū)業(yè)務(wù)的內(nèi)容流轉(zhuǎn)效率、內(nèi)容分發(fā)效率、內(nèi)容自動(dòng)化質(zhì)量提升能力帶來(lái)可觀的改善，可以更有效降低業(yè)務(wù)的人力投入，促進(jìn)全局資源的優(yōu)化配置。AI視頻內(nèi)容理解技術(shù)大大降低了特定場(chǎng)景中視頻應(yīng)用的成本，為品牌實(shí)現(xiàn)內(nèi)容營(yíng)銷數(shù)字化起到了推動(dòng)性作用。
易有料成立于2019年，專注于企業(yè)級(jí)內(nèi)容智能運(yùn)營(yíng)服務(wù)，是國(guó)內(nèi)較早提出做企業(yè)級(jí)內(nèi)容中臺(tái)解決方案的公司。整合全網(wǎng)優(yōu)質(zhì)內(nèi)容及優(yōu)質(zhì)內(nèi)容創(chuàng)作者，通過(guò)AI智能技術(shù)，實(shí)現(xiàn)企業(yè)從內(nèi)容入庫(kù)到內(nèi)容管理再到內(nèi)容分發(fā)全鏈路的智能運(yùn)營(yíng)，協(xié)助企業(yè)最大化挖掘私域價(jià)值。易有料期待與更多的行業(yè)朋友們一起探索內(nèi)容的價(jià)值與內(nèi)容行業(yè)的未來(lái)發(fā)展趨勢(shì)，助力企業(yè)內(nèi)容營(yíng)銷的數(shù)字化轉(zhuǎn)型。
（免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 ）
