騰訊參與制定Vulkan矩陣擴(kuò)展標(biāo)準(zhǔn),推動(dòng)機(jī)器學(xué)習(xí)加速計(jì)算發(fā)展

隨著人工智能技術(shù)的發(fā)展,機(jī)器學(xué)習(xí)應(yīng)用場景越來越廣泛,從智能語音助手到自動(dòng)駕駛,從智能推薦到圖像識別,都需要大量的計(jì)算資源來支持。而GPU作為一種高效的計(jì)算資源,越來越受到關(guān)注,成為機(jī)器學(xué)習(xí)加速計(jì)算的重要工具。然而,跨硬件通用加速缺乏跨平臺跨硬件的通用API,不同顯卡實(shí)現(xiàn)高效算子十分困難和復(fù)雜。

作為頭部科技企業(yè),騰訊一直致力于推動(dòng)人工智能技術(shù)的發(fā)展。因此,騰訊作為khronos會員積極參與新擴(kuò)展標(biāo)準(zhǔn)制定,為機(jī)器學(xué)習(xí)加速計(jì)算提供更好的解決方案。在Vulkan 1.3.255版本中,騰訊聯(lián)合ARM、NVIDIA、AMD、Google等諸多全世界科技企業(yè)一起帶來新擴(kuò)展VK_KHR_cooperative_matrix,這是騰訊首次參與khronos標(biāo)準(zhǔn)貢獻(xiàn)。

Vulkan是通用的、跨平臺的、新一代圖形加速API,支持Windows、Linux、macOS、Android、iOS等多個(gè)操作系統(tǒng)。VK_KHR_cooperative_matrix擴(kuò)展為Vulkan帶來中尺度矩陣類型,用于加速矩陣計(jì)算,加速神經(jīng)網(wǎng)絡(luò)推理。這一新擴(kuò)展使得非單一硬件綁定的通用AI計(jì)算加速成為可能,打破了行業(yè)壟斷,帶來了產(chǎn)業(yè)創(chuàng)新。Nvidia、ARM、AMD等顯卡廠商將發(fā)布新驅(qū)動(dòng)支持這個(gè)擴(kuò)展標(biāo)準(zhǔn),這將進(jìn)一步推動(dòng)機(jī)器學(xué)習(xí)加速計(jì)算的發(fā)展。

在VK_KHR_cooperative_matrix擴(kuò)展標(biāo)準(zhǔn)的制定中,騰訊優(yōu)圖實(shí)驗(yàn)室參與制定。在標(biāo)準(zhǔn)修訂過程中,騰訊優(yōu)圖實(shí)驗(yàn)室結(jié)合ncnn項(xiàng)目中的vulkan加速實(shí)踐經(jīng)驗(yàn),主張新標(biāo)準(zhǔn)中的矩陣加載函數(shù)的stride參數(shù)允許為0,以便支持自動(dòng)廣播行為。這一參數(shù)能有效提升神經(jīng)網(wǎng)絡(luò)卷積和線性層計(jì)算中的bias數(shù)據(jù)處理效率。騰訊優(yōu)圖實(shí)驗(yàn)室專家,業(yè)界知名的開源神經(jīng)網(wǎng)絡(luò)推理庫ncnn作者nihui表示:“khronos在線會議中,該提議獲得各參與廠商技術(shù)人員認(rèn)可和贊同,并成為硬性標(biāo)準(zhǔn)之一,要求在GPU驅(qū)動(dòng)中實(shí)現(xiàn)該行為。”

ncnn使用Vulkan API作為其跨平臺GPU通用加速方案。ncnn通過使用VK_KHR_cooperative_matrix擴(kuò)展,在AMD顯卡上跑超分AI,速度提升約2.3倍。這也是VK_KHR_cooperative_matrix的首次應(yīng)用,已發(fā)布在ncnn新版本中,帶來更廣泛的跨硬件廠商GPU加速。

騰訊參與制定VK_KHR_cooperative_matrix擴(kuò)展標(biāo)準(zhǔn),推動(dòng)人工智能技術(shù)的發(fā)展,讓機(jī)器學(xué)習(xí)的計(jì)算能力更加高效、普惠和可持續(xù),為機(jī)器學(xué)習(xí)加速計(jì)算提供了更好的解決方案,實(shí)現(xiàn)跨平臺跨硬件的通用API,使得機(jī)器學(xué)習(xí)加速計(jì)算更加高效、靈活。

一直以來,騰訊也在積極參與各類AI、大模型等方面的標(biāo)準(zhǔn)建設(shè)。2020年,騰訊被選舉為全國信標(biāo)委人工智能分委會委員兼副秘書長單位,這意味著國家在推進(jìn)包括人工智能在內(nèi)的“新基建”過程中,騰訊正作為核心成員,承擔(dān)更多標(biāo)準(zhǔn)制定工作以及技術(shù)引領(lǐng)作用。前不久,騰訊云還聯(lián)合中國信通院發(fā)起行業(yè)大模型生態(tài)計(jì)劃,并牽頭國內(nèi)首個(gè)金融行業(yè)大模型標(biāo)準(zhǔn)制訂,為金融行業(yè)智能化的高質(zhì)量規(guī)范化發(fā)展提供重要支撐。

未來,騰訊將積極參與更多行業(yè)標(biāo)準(zhǔn)制定,助力更多行業(yè)提質(zhì)增效,為人類社會帶來更多的福祉。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )