相芯出席英特爾 OpenVINO DevCon中國系列工作坊大會,暢談數(shù)字人本地化推理

9月13日,以“OpenVINO™ 加速 PC 及小型設備 LLM 性能”為主題的Intel OpenVINO™ DevCon中國系列工作坊2024活動在北京舉行,相芯科技作為Intel合作伙伴受邀出席并在會上分享“通過使用OpenVINO™ 工具套件,讓數(shù)字人基于Intel iGPU和獨立GPU 進行性能優(yōu)化和推理加速的實踐應用”。

相芯科技市場總監(jiān)Lisa表示:“目前依賴高算力AI能力的數(shù)字人應用大都基于云服務,成本較高,相芯一直在探索更低成本的部署方案,以降低用戶使用門檻,OpenVINO™工具套件在數(shù)字人低成本部署探索方面有著出色的表現(xiàn),相芯與Intel的合作可謂一拍即合。”

OpenVINO™是英特爾基于自身現(xiàn)有的硬件平臺開發(fā)的一種可以加快高性能計算機視覺和深度學習視覺應用開發(fā)速度的工具套件。旨在通過模型、優(yōu)化、部署三個簡單的開發(fā)步驟,實現(xiàn)深度學習模型的優(yōu)化和“一次編寫,任意部署”,無論是在CPU(中央處理器)、GPU(圖形處理器單元)、NPU(神經網絡處理器)還是FPGA(可編程邏輯器件)上,都能實現(xiàn)模型的快速落地部署,從而加速深度學習模型推理工作流程。

在會上,Lisa介紹了相芯基于OpenVINO™ 2024.0版本打造數(shù)字人和AR視頻特效的整體開發(fā)框架。Lisa表示,OpenVINO™支持多種格式模型,通過OpenVINO™的優(yōu)化工具可以對這些模型進行轉換和壓縮,在不降低效果的情況下,減少模型尺寸。同時,在加載和編譯模型的時候,借助OpenVINO™自帶的編譯選項還可以快速進行編譯優(yōu)化。

“為了更好地平衡性能和功耗,我們還可以將多個模型分別放在CPU、GPU、NPU上進行推理,如GPU適合做渲染流水線AI,所以我們的數(shù)字人渲染在GPU上進行推理,NPU專用低功耗AI引擎可以用于持續(xù)性AI處理任務,我們的AR視頻特效就跑在NPU上,可以在直播和視頻會議中實現(xiàn)更好的實時美顏效果。”

OpenVINO™為開發(fā)者提供了更為強大的性能支持和擴展能力,助力開發(fā)者高效利用AI加速技術。相芯基于OpenVINO™ 2024.0版本打造的數(shù)字人和AR視頻特效也在會上亮相,吸引了眾多與會者關注討論。

Lisa表示,以前大部分數(shù)字人AI應用只能在云GPU上跑,需要依賴高算力顯卡如4090、A100等,成本較高。但基于OpenVINO™,相芯不僅能讓AI數(shù)字人應用在PC端流暢運行,更能在配置集成顯卡的普通輕薄筆記本上運行,極大降低了數(shù)字人應用的資源損耗和成本,為中小型企業(yè)和個人用戶提供了更多的可行性。

同時,基于 OpenVINO™打造AR視頻特效在各項美顏指標上也都有著出色的表現(xiàn),不僅可以精準檢測出雀斑、痘痘等瑕疵并有效去除,在保障膚色均勻同時,還可以對特征痣和皮膚的肌理感進行保留,讓美顏效果真實自然,避免“假面感”。

最后,Lisa透露,相芯科技正在與Intel展開深度合作,探索將AI數(shù)字人和AR視頻特效技術嵌入到設備底層,這不僅能讓更多合作伙伴受益,還能讓普通用戶通過設備原生的技術能力,在直播、社交等應用場景中獲得更好的體驗。她最后補充道:“我們期待與Intel及更多行業(yè)伙伴攜手合作,探索數(shù)字人應用的更多可能性,為各行業(yè)打造新質生產力創(chuàng)造更多可能性!”

(免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現(xiàn)的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。 )