企業(yè)用大模型如何更具「效價比」？百度智能云發(fā)布5款大模型新品

服務8萬企業(yè)用戶，累計幫助用戶精調1.3萬個大模型，幫助用戶開發(fā)出16萬個大模型應用，自2023年12月以來百度智能云千帆大模型平臺API日調用量環(huán)比增長97%...從一年前國內大模型平臺的“開路先鋒”到如今的大模型“超級工廠”，百度智能云千帆大模型平臺在國內大模型市場牢牢占據(jù)著領先身位，但奔跑的腳步卻并未停歇。

3月21日，百度智能云在北京首鋼園召開千帆產品發(fā)布會，百度智能云在大會期間宣布：

1、攜手北京市石景山區(qū)，共建全國首個百度智能云千帆大模型產業(yè)創(chuàng)新基地，助推區(qū)域產業(yè)騰飛；

2、滿足企業(yè)“效價比”核心訴求，千帆ModelBuilder大模型服務全面升級，3個輕量級大模型、2個垂直場景大模型全新發(fā)布；

3、大幅降低AI原生應用開發(fā)門檻，千帆AppBuilder組件能力全面升級。

（百度智能云千帆大模型產業(yè)（北京）創(chuàng)新基地啟動建設）

活動中，石景山區(qū)政府黨組成員、副區(qū)長曹世輝，中關村石景山園管委會副主任崔明明，百度副總裁謝廣軍，百度副總裁石清華共同啟動全國首個百度智能云干帆大模型產業(yè)（北京）創(chuàng)新基地。

創(chuàng)新基地致力于推動大模型技術與產業(yè)創(chuàng)新深度融合，雙方將圍繞提升算力供給、優(yōu)化模型算法、推動數(shù)據(jù)開放、打造示范場景、深化人才引育等方面深耕厚植，政企合力打造人工智能產業(yè)新高地。曹世輝副區(qū)長表示，石景山區(qū)將與百度攜手共進，聚焦人工智能和大模型技術研發(fā)和創(chuàng)新應用，構建完善AI 產業(yè)生態(tài)，為區(qū)域數(shù)字化轉型和產業(yè)智能化升級提供支撐，為新質生產力的培育和發(fā)展注入澎湃動能。

（百度副總裁謝廣軍）

2023年，大模型在全球范圍呈現(xiàn)出爆發(fā)式增長，國內更是打起了“百模大戰(zhàn)”，無數(shù)科技大廠與科研院所聚焦大模型“本體”，瘋狂“內卷”。

百度副總裁謝廣軍表示，大模型技術在過去一年飛速發(fā)展，隨著逐步落地千行百業(yè)，2024年將成為國內大模型產業(yè)應用爆發(fā)的元年。針對企業(yè)最關心的大模型落地場景、使用成本、應用開發(fā)、應用效果四大挑戰(zhàn)，百度智能云千帆在大模型、AI原生應用開發(fā)兩個方面給出了最新“解題思路”。

百度智能云千帆大模型平臺發(fā)布“3+2”新模型套餐：

提高企業(yè)應用大模型的“效價比”

大模型效果是“技術派”的不懈追求，而經濟效益則是“市場派”的終極目標。謝廣軍在與諸多行業(yè)客戶的交流中發(fā)現(xiàn)，除了極少的大客戶對大模型有極致的效果追求，更多的企業(yè)和機構往往要綜合考量大模型的使用效果、性能以及成本，即“效價比”。本次，千帆平臺的模型矩陣針對企業(yè)的“效價比”核心訴求進行了一系列升級。

（百度智能云千帆大模型平臺模型矩陣）

文心大模型ERNIE 3.5是目前百度智能云千帆大模型平臺上最受歡迎的基礎大模型之一。針對用戶的常見通用的對話場景，ERNIE 3.5 在指令遵循、上下文學習和邏輯推理能力三方面分別進行了能力增強。升級后的ERNIE 3.5在企業(yè)應用場景如文案創(chuàng)作、信息抽取和工具調用三大場景中，應用表現(xiàn)分別大幅提升24%、27%和22%。

其次，相比超大規(guī)模參數(shù)的大模型，輕量級大模型的參數(shù)量更小，更便于客戶針對特定使用場景進行模型精調，更容易達成使用效果預期，同時節(jié)約更多成本開銷。本次大會，百度智能云發(fā)布了包括ERNIE Speed、ERNIE Lite、ERNIE Tiny在內，參數(shù)量由大到小的三款輕量級大模型，幫助客戶實現(xiàn)“減量不減效”，節(jié)約不必要投資。

具體來講，ERNIE Speed作為三款輕量級大模型中的“大個子”，推理場景下?lián)碛凶罡?28k的上下文長度，在處理知識問答等任務時，能夠更好的處理上下文的依賴關系，生成更加連貫和準確的預測或回答。同時，針對特定場景可以將ERNIE Speed作為基座模型進行精調，模型效果可以追平甚至超過旗艦級大參數(shù)規(guī)模大模型，效價比大幅提升。

相比ERNIE Speed，ERNIE Lite的參數(shù)量則更小，也更加適合搭載在低算力的AI加速卡上處理推理任務，在兼顧模型效果與推理性能的同時，大幅降低客戶落地應用成本。作為ERNIE-Bot-turbo模型的升級版，ERNIE Lite在情感分析、多任務學習、自然推理等場景下的應用效果提升了20%。推理調用成本大幅下降了53%！

三款輕量級模型中參數(shù)量最小的ERNIE Tiny則為客戶提供了極致低成本、低延遲的最佳選擇。在檢索、推薦、意圖識別等高并發(fā)、低延時等應用場景中，ERNIE Tiny的優(yōu)異性能呈現(xiàn)了不俗表現(xiàn)。在某對話推薦業(yè)務場景中，精調后的ERNIE Tiny在搜索引擎推薦詞激發(fā)環(huán)節(jié)，相比ERNIE 3.5，對話輪次增長了3.5%，成本下降了32%。

此外，企業(yè)在落地應用中，對大模型在人物扮演、外部工具調用均有更高的效果要求。本次千帆大模型平臺ModelBuilder還基于對企業(yè)場景的深入洞察，結合百度自身業(yè)務最佳實踐沉淀，推出了ERNIE Character和ERNIE Functions兩款垂直場景大模型，分別適配客戶在角色扮演類應用場景（如游戲NPC、客服對話等）和工具調用場景（對話中使用外部工具、調用業(yè)務函數(shù)等）中的使用需求。

在企業(yè)實踐中，某智能硬件廠商，基于ERNIE Character打造智能助理，應用該模型后在人設一致性、激發(fā)并提升用戶聊天欲望等方面效果顯著提升。某旅游出行類APP，使用ERNIE Functions打造智能客服助手，在執(zhí)行訂票、查詢航班狀態(tài)等多種function調用上準確性達到85%。

千帆AppBuilder全面升級：

大幅降低AI原生應用開發(fā)門檻

千帆AppBuilder作為產業(yè)級AI原生應用開發(fā)平臺，是千帆的重要組成部分。AppBuilder底層由基于百度多年技術和實踐經驗沉淀的大模型組件、AI能力組件的基礎組件和面向典型應用場景深入調優(yōu)建設的一系列高級組件構成?；A組件與高級組件共同支撐Agent，一方面可以通過工作流編排實現(xiàn)更為復雜的業(yè)務邏輯，另一方面Agent也具備強大的自主任務規(guī)劃能力，能夠理解用戶意圖自動規(guī)劃執(zhí)行路徑，實現(xiàn)多工具的自動編排和執(zhí)行。這些能力通過零代碼態(tài)、代碼態(tài)兩類開發(fā)方式提供服務，更好的匹配不同開發(fā)者的使用需求。

開發(fā)完成后，應用可多渠道分發(fā)與集成，AppBuilder支持將應用一鍵分發(fā)到微信客服、微信公眾號、Web端/H5及百度靈境矩陣等主流渠道?；诎俣褥`境矩陣，應用可在百度搜索、百度信息流等主流場景分發(fā)與掛載。真正實現(xiàn)應用開發(fā)出來后，就直接觸達用戶，打通從AI原生應用創(chuàng)建到開發(fā)再到分發(fā)的全流程。

（百度智能云千帆AppBuilder）

升級后的AppBuilder開放的工具組件多達55個。包括基于百度多年技術積累和自有業(yè)務沉淀的大模型組件、AI能力組件，也包括搜索等百度特色的業(yè)務組件、和多場景的第三方API工具，另外還提供了 RAG（知識檢索問答）、GBI（生成式數(shù)據(jù)分析）等根據(jù)典型應用場景深入調優(yōu)的高級能力組件。

開發(fā)AI原生應用離不開云基礎設施，本次發(fā)布的基礎組件還包括了百度智能云全新推出的向量數(shù)據(jù)庫VDB 1.0。向量數(shù)據(jù)庫是企業(yè)不可或缺的知識庫核心組件，它針對傳統(tǒng)知識庫問答系統(tǒng)遇到的性能瓶頸、維護挑戰(zhàn)及規(guī)模限制等問題提供了有力解決方案。全新發(fā)布的百度向量數(shù)據(jù)庫VDB 1.0，不僅集成了全面的運維控制和安全防護能力，還兼容了千帆、LangChain等主流生態(tài)系統(tǒng)，能夠幫助企業(yè)輕松管理數(shù)以千萬計的文檔知識，最大支持百億向量存儲規(guī)模以及毫秒級的向量檢索速度。同時，相比同類型開源產品，VDB 1.0性能最高提升10倍。

在組件之上，千帆AppBuilder推出的Agent（智能體）應用框架，具備精準的任務自主規(guī)劃能力，對多種應用工具的自動編排準確率超過90%，這個數(shù)字還在不斷提升。AppBuilder還支持開發(fā)者接入自定義工具，通過將自動編排與手動編排相結合，實現(xiàn)更復雜場景應用的需求定制。Agent框架內的代碼解釋器能力，也在本次升級中大幅提升了40%的性能、在復雜的數(shù)據(jù)分析場景的生成結果可接受度高達95%，輕松應對各類數(shù)據(jù)分析與信息處理的場景。

此外，AppBuilder的代碼態(tài)開發(fā)工具也再添利器。AppBuilder SDK本次重磅發(fā)布了Agent API，支持開發(fā)者將Agent便捷集成到自己的業(yè)務系統(tǒng)中，同時AppBuilder SDK面向主流AI原生應用場景提供了豐富的應用樣例，目前已在Github開源，支持各個組件自由調用的靈活編排，幫助開發(fā)者實現(xiàn)應用的二次開發(fā)和便捷集成。

大會現(xiàn)場，還演示了如何在零代碼開發(fā)模式中，只用1分鐘構建一個“英語作文小幫手”Agent（智能體）應用，只需在AppBuilder中輸入應用名稱或希望開發(fā)的應用功能，平臺就可以自動生成應用，通過簡單的調整角色指令、添加所需工具組件，就可以快速生成一個英語作文批改小助手。發(fā)布后就可直接使用，三步完成應用創(chuàng)建與分發(fā)。

（1分鐘創(chuàng)建英語作文批改小助手）

在百度智能云看來，隨著大模型技術的不斷演進和突破，工程化實踐與用戶需求適配正在變得愈發(fā)重要。只有深入場景，發(fā)掘、響應客戶的真實需求，才是釋放創(chuàng)新技術紅利的最佳路徑。

生成海報

免責聲明：此文內容為第三方自媒體作者發(fā)布的觀察或評論性文章，所有文字和圖片版權歸作者所有，且僅代表作者個人觀點，與極客網無關。文章僅供讀者參考，并請自行核實相關內容。投訴郵箱：editor@fromgeek.com。

免責聲明：本網站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網站出現(xiàn)的信息，均僅供參考。本網站將盡力確保所提供信息的準確性及可靠性，但不保證有關資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網站對有關資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網站中的網頁或鏈接內容可能涉嫌侵犯其知識產權或存在不實內容時，應及時向本網站提出書面權利通知或不實情況說明，并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網站在收到上述法律文件后，將會依法盡快聯(lián)系相關文章源頭核實，溝通刪除相關內容或斷開相關鏈接。