7月19日消息, OpenAI宣布推出GPT-4o mini模型,并稱其為最具成本效益的小型模型。GPT-4o mini 可以替代 GPT-3.5 Turbo,對標的是 Claude 3 Haiku 和 Gemini 1.5 Flash, OpenAI預計GPT-4o mini更加經(jīng)濟實惠,將能顯著擴大使用人工智能構建的應用范圍。
據(jù)悉,GPT-4o mini在MMLU上的得分為82%,目前在 LMSYS 排行榜的聊天方面分數(shù)優(yōu)于 GPT-4。
GPT-4o mini 的商用價格是每百萬輸入 token 15 美分,每百萬輸出 token 60 美分,比GPT-3.5 Turbo便宜60%以上。
GPT-4o-mini在API(應用程序編程接口)中支持文本和視覺,并在未來支持文本、圖像、視頻和音頻輸入和輸出。該模型具有 128K token 的上下文窗口,知識截至 2023 年 10 月。得益于與 GPT-4o 共享的改進版 tokenizer,處理非英語文本能力也更加經(jīng)濟高效。
具有卓越文本智能和多模態(tài)推理的小型模型
GPT-4o mini在文本智能和多模式推理的學術基準上超越了GPT-3.5 Turbo和其他小型模型,并支持與GPT-4o相同的語言范圍。
GPT-4o mini還展示了函數(shù)調用的強大性能,這使開發(fā)人員能夠構建獲取數(shù)據(jù)或與外部系統(tǒng)進行操作的應用程序,與GPT-3.5 Turbo相比,它還提高了長上下文性能。
GPT-4o mini已經(jīng)在多個關鍵基準測試中進行了評估:
推理任務:GPT-4o mini在涉及文本和視覺的推理任務中優(yōu)于其他小型模型,在文本智能和推理基準MMLU上的得分為82.0%,而Gemini Flash的得分為77.9%,Claude Haiku的得分為73.8%。
數(shù)學和編碼能力:GPT-4o mini在數(shù)學推理和編碼任務方面表現(xiàn)出色,優(yōu)于市場上其他小型模型。在測量數(shù)學推理的MGSM上,GPT-4o mini的得分為87.0%,而Gemini Flash的得分為75.5%,Claude Haiku的得分為71.7%。
GPT-4o mini在衡量編碼性能的HumanEval上的得分為87.2%,而Gemini Flash的得分為71.5%,Claude Haiku的得分為75.9%。
多模態(tài)推理:GPT-4o mini在多模態(tài)推理評估MMMU上也表現(xiàn)出色,得分為59.4%,而Gemini Flash和Claude Haiku的得分分別為56.1%和50.2%。
安全性方面,GPT-4o mini 內置了與 GPT-4o 相同的安全緩解措施,OpenAI 根據(jù) Preparedness Framework 和自愿承諾,通過自動和人工評估對其進行了仔細評估。70 多名社會心理學和錯誤信息等領域的外部專家對 GPT-4o 進行了測試,以確定潛在風險,這些問題的解決方法會在即將發(fā)布的 GPT-4o system card 和 Preparedness 記分卡中分享。這些專家評估得出的見解有助于提高 GPT-4o 和 GPT-4o mini 的安全性。
可用性和定價
GPT-4o-mini現(xiàn)在可以作為文本和視覺模型在 Assistant API、Chat Completions API 和 Batch API 中使用。開發(fā)人員每 100 萬輸入 token 價格為 15 美分,每 100 萬輸出 token(大約相當于一本標準書的 2500 頁)價格為 60 美分。
OpenAI 計劃在未來幾天推出GPT-4o mini的微調版。
從今天開始,在ChatGPT中,F(xiàn)ree、Plus和Team用戶能夠訪問GPT-4o mini,以代替取代 GPT-3.5 Turbo。
企業(yè)用戶將從下周開始獲得訪問權限。
OpenAI 表示,在過去的幾年里見證了人工智能的顯著進步,同時成本大幅降低。例如,自 2022 年 OpenAI 推出功能較弱的模型 text-davinci-003 ,至如今的 GPT-4o mini ,每個 token 成本已下降了 99%。OpenAI 致力于繼續(xù)降低成本,同時增強模型功能。人工智能正變得越來越容易獲得、可靠,并嵌入我們的日常數(shù)字體驗中。
(免責聲明:本網(wǎng)站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內容可能涉嫌侵犯其知識產(chǎn)權或存在不實內容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。 )