華為云AI作詩小程序“樂府”，邀你吟詩弄月話中秋

日前,我們從華為云官方了解到,華為推出了一款基于華為云AI技術(shù)的全新產(chǎn)品,來自華為諾亞方舟實驗室新推出的寫詩AI“樂府”,其不僅能寫詩、作詞,而且還能寫藏頭詩。自產(chǎn)品問世以來,就引發(fā)了不少網(wǎng)友的關(guān)注,不少網(wǎng)友更是為強大的華為云AI技術(shù)點贊。

針對這款基于華為云AI技術(shù)打造的產(chǎn)品,華為諾亞方舟實驗室語音語義首席科學(xué)家劉群也講述了華為云AI背后的故事,其表示,我們不懂詩,且在這個系統(tǒng)中,并沒有用詩的規(guī)矩去訓(xùn)練,這一切都是系統(tǒng)自己學(xué)到的。

那么,華為云AI技術(shù)是如何實現(xiàn)寫詩的呢?對此,一位負(fù)責(zé)華為云AI研發(fā)的負(fù)責(zé)人給出了答案。據(jù)其介紹,生成中國的古詩詞與自由生成文本不同,通常需要滿足內(nèi)容和形式兩個方面的要求。中國的古詩詞有各種各樣的形式,比如五律、七律、五絕、七絕、滿江紅、西江月、水調(diào)歌頭等各種詞牌以及對聯(lián),每一種都有相應(yīng)的押韻、平仄、字?jǐn)?shù)、對仗等規(guī)定;內(nèi)容方面,一首詩要圍繞著一個主題展開,同時還要保證內(nèi)容的連貫性,它的要求相對而言是比較復(fù)雜的。

華為提出的“樂府”系統(tǒng),與當(dāng)前大多數(shù)解決方案不同,它是基于華為云AI打造的,不需要任何特性或者人工設(shè)定規(guī)則,也沒有設(shè)計任何額外的神經(jīng)元組件。在研究的過程中,華為云AI技術(shù)需要做的是把訓(xùn)練用的詩詞序列化為格式化的文本序列,作為訓(xùn)練數(shù)據(jù)。并通過對語言模型token的抽樣,生成滿足內(nèi)容和形式要求的詩詞,比如律詩、絕句、對聯(lián)以及詞等等。

值得注意的是,樂府AI是首個基于GPT打造的作詩系統(tǒng),而且與谷歌提出的BERT息息相關(guān)。整體的GPT模型是在BERT的源代碼基礎(chǔ)上實現(xiàn)的,Transformer大小的配置也采用了BERT中發(fā)布的中文 vocab和tokenization 腳本,與BERT-Base相同。

整個模型訓(xùn)練過程一共有兩個階段: 微調(diào)和預(yù)訓(xùn)練。其中,預(yù)訓(xùn)練是在華為云AI上完成的,一共耗費了90個小時,期間共訓(xùn)練了4個echo,使用8塊英偉達(dá)V100(16G) GPU。微調(diào)的過程是將所有詩歌序列輸入Transformer,并訓(xùn)練一個自回歸語言模型。而當(dāng)整個訓(xùn)練完成之后,需要將通過華為云AI技術(shù)生成的詩歌格式和主題轉(zhuǎn)化為一個初始序列,并將其輸入到模型中,最后再進(jìn)行解碼即可。

中國古詩詞生成AI,基于華為云AI打造的“樂府”并不是第一個,也不是最后一個。未來,華為將不斷研發(fā)出更多基于華為云AI技術(shù)打造的創(chuàng)新產(chǎn)品,致力為更多領(lǐng)域、更多客戶提供全新的體驗方式。

生成海報

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請進(jìn)一步核實，并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。