企業(yè)如何快速實現AI應用落地?紅帽給出“三步走”AI部署路徑

11月4日消息,過去兩年,全球資本大舉投入AI基礎建設,目前AI的基礎架構已經基本完善,但許多企業(yè)應用仍未落地。不少企業(yè)曾嘗試用大模型提升效能,但發(fā)現大模型不適合生產場景,因為一點小錯就可能帶來風險。

在2024紅帽論壇上,企業(yè)級開源解決方案提供商紅帽公司展示了其如何用開放混合的AI和開源方法加速企業(yè)AI應用。紅帽全球副總裁兼大中華區(qū)總裁曹衡康表示,用混合開放的模式來開發(fā)AI已成為一個必然趨勢,紅帽在基礎架構上采用混合云模式,支持本地數據中心、公有云和邊緣計算環(huán)境的運行,并支持開源和閉源模型,從而為企業(yè)提供靈活選擇。

在過去幾年,紅帽提出了“小模型”概念,即專屬模型(faithful purpose),讓企業(yè)的數據驅動AI模型的生成,確保模型穩(wěn)定、安全,并符合企業(yè)的特定需求。同時還引入“社區(qū)版”小模型,通過合成數據大幅減少對真實數據的需求,將數據量降至原來的千分之一。這種方式不僅降低了算力需求,節(jié)約了成本,能耗也大幅減少,對環(huán)境更加友好。

場景應用是ISV(獨立軟件開發(fā)商)和應用供應商最擅長的領域。由于許多企業(yè)和行業(yè)都有各自的特點,紅帽加速了與本土ISV及方案開發(fā)商的合作,這合作涵蓋芯片和軟件等方面,同時也確保紅帽的開源路線在國內得到更多本土化支持。紅帽大中華區(qū)資深市場總監(jiān)趙文斌透露,紅帽最近與NVIDIA等全球合作伙伴開展了新項目,特別是在加速場景應用落地方面。

值得一提的是,實際應用中,企業(yè)在AI預算方面非常謹慎,通常需要看到效果后才會進一步投入。對此,曹衡康表示,紅帽的混合云理念鼓勵客戶在合適的場所部署算力,比如公司內部數據中心、公有云,甚至跨多云環(huán)境。去年紅帽推出了“Unlock”理念,就是希望避免客戶被鎖定在特定云上,開源架構為客戶提供更多彈性和自由度。

具體來看,紅帽提出了“分步實施”的策略,即企業(yè)AI應用三步曲。第一步,客戶可以在最小資源配置下試用開源模型和工具,比如在筆記本電腦上用CPU試跑,而不需要額外的GPU卡。

如果第一步測試效果滿意,客戶可以進入第二步,通過云租用算力進行進一步擴展。紅帽平臺幾乎可在任何云上運行,客戶可以選擇公司數據中心或外部公有云資源,這樣在確認模型適合需求后,才進入第三步的大規(guī)模部署。

第三步,紅帽的架構支持跨云混合部署。例如,客戶可以在中國使用阿里云,在美國使用AWS,這種多云方案既靈活又經濟。我們的目標是幫助客戶實現最佳的投資回報率(ROI),并在每一步提供適配的支持。

紅帽大中華區(qū)方案架構部總經理王慧慧介紹稱,自2019年IBM成為紅帽母公司以來,IBM在開源方面的投入愈發(fā)積極,在工作方式和平臺選擇上越來越傾向開源。IBM將其最初的Watson平臺(現稱Watson X)逐步開源,接下來IBM和紅帽將共同致力于維護開源模型的持續(xù)迭代。

極客網企業(yè)會員

免責聲明:本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網站出現的信息,均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時,應及時向本網站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后,將會依法盡快聯系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。

2024-11-04
企業(yè)如何快速實現AI應用落地?紅帽給出“三步走”AI部署路徑
在2024紅帽論壇上,企業(yè)級開源解決方案提供商紅帽公司展示了其如何用開放混合的AI和開源方法加速企業(yè)AI應用。值得一提的是,實際應用中,企業(yè)在AI預算方面非常謹慎,通常需要看到效果后才會進一步投入。對此,曹衡康表示,紅帽的混合云理念鼓勵客戶在合適的場所部署算力,比如公司內部數據中心、公有云,甚至跨多云環(huán)境。具體來看,紅帽提出了“分步實施”的策略,即企業(yè)AI應用三步曲。

長按掃碼 閱讀全文