6月4日消息,關(guān)于國內(nèi)大模型被美國斯坦福大學(xué)團(tuán)隊(duì)套殼抄襲一事,有了最新進(jìn)展。該斯坦福大學(xué)團(tuán)隊(duì)中的兩位來自斯坦福的本科生發(fā)文道歉。
斯坦福Llama3-V團(tuán)隊(duì)的兩位作者Siddharth Sharma和 Aksh Garg在X上就這一學(xué)術(shù)不端行為向中國面壁智能MiniCPM團(tuán)隊(duì)正式道歉,并表示會(huì)將Llama3-V模型撤下。
在這則道歉推文中,斯坦福Llama3-V團(tuán)隊(duì)中來自南加利福尼亞大學(xué)的Mustafa Aljadery被指是主要過錯(cuò)方,Mustafa Aljadery為該項(xiàng)目編寫了代碼。但是自昨天起Mustafa Aljadery已經(jīng)“失聯(lián)”。道歉推文的作者Aksh Garg與Siddharth Sharma主要負(fù)責(zé)幫助Mustafa進(jìn)行模型推廣。
斯坦福人工智能實(shí)驗(yàn)室主任Christopher Manning也發(fā)文譴責(zé)抄襲行為,他認(rèn)為團(tuán)隊(duì)在事發(fā)后避重就輕,并對MiniCPM 這一中國開源模型表示贊揚(yáng)。
事情起源是,5月29日,斯坦福大學(xué)的一個(gè)研究團(tuán)隊(duì)發(fā)布了一個(gè)名為Llama3V的模型,號(hào)稱只要500美元(約等于人民幣3650元)就能訓(xùn)練出一個(gè)SOTA多模態(tài)模型,效果比肩GPT-4V、Gemini Ultra與Claude Opus 。
因?yàn)檠芯繄F(tuán)隊(duì)擁有斯坦福大學(xué)等知名光環(huán),該團(tuán)隊(duì)的Llama3V模型一發(fā)布就引發(fā)了諸多關(guān)注,一度沖上HuggingFace趨勢榜首頁。
但是,很快,在X和Hugging Face上有開發(fā)者提出質(zhì)疑,認(rèn)為Llama3V套殼了中國AI創(chuàng)企面壁智能在5月中旬發(fā)布的8B多模態(tài)開源小模型MiniCPM-Llama3-V 2.5。
有網(wǎng)友細(xì)心詳細(xì)列舉了“抄襲”證據(jù),包括,Llama3-V的模型架構(gòu)和代碼與MiniCPM-Llama3-V 2.5幾乎完全相同,Llama3-V使用了MinicPM-Llama3-V2.5分詞器等等。
讓質(zhì)疑者不能忍的是,Llama3-V作者還無故刪除了網(wǎng)友在Llama3-V頁面上提交的質(zhì)疑他們抄襲的問題。
于是,這位網(wǎng)友直接跑到面壁智能GitHub項(xiàng)目下留言提醒面壁智能團(tuán)隊(duì)關(guān)注被美國斯坦福大學(xué)團(tuán)隊(duì)抄襲的事情。
隨后,該斯坦福團(tuán)隊(duì)成員已刪除他們在X上官宣模型的推文,并將該項(xiàng)目在Github和HuggingFace上的庫一并刪除。
對于此事,面壁智能CEO李大海昨日在朋友圈發(fā)文做出了正式回應(yīng):“這兩天收到社區(qū)和媒體及朋友的反饋,來自斯坦福團(tuán)隊(duì)的 Llama3V 項(xiàng)目與面壁小鋼炮最新發(fā)布的多模態(tài)模型 MiniCPM-Llama3-V 2.5 展現(xiàn)出驚人的相似度。
經(jīng)過團(tuán)隊(duì)核實(shí),除了社區(qū)網(wǎng)友列出的證據(jù)外,我們還發(fā)現(xiàn) Llama3V 展現(xiàn)出和小鋼炮一樣的清華簡識(shí)別能力,連做錯(cuò)的樣例都一模一樣,而這一訓(xùn)練數(shù)據(jù)尚未對外公開。這項(xiàng)工作是團(tuán)隊(duì)同學(xué)耗時(shí)數(shù)個(gè)月,從卷帙浩繁的清華簡中一個(gè)字一個(gè)字掃描下來,并逐一進(jìn)行數(shù)據(jù)標(biāo)注,融合進(jìn)模型中的。更加 tricky的是,兩個(gè)模型在高斯擾動(dòng)驗(yàn)證后,在正確和錯(cuò)誤表現(xiàn)方面都高度相似。
技術(shù)創(chuàng)新不易,每一項(xiàng)工作都是團(tuán)隊(duì)夜以繼日的奮斗結(jié)果,也是以有限算力對全世界技術(shù)進(jìn)步與創(chuàng)新發(fā)展作出的真誠奉獻(xiàn)。我們希望團(tuán)隊(duì)的好工作被更多人關(guān)注與認(rèn)可,但不是以這種方式。
我們對這件事深表遺憾!一方面感慨這也是一種受到國際團(tuán)隊(duì)認(rèn)可的方式,另一方面也呼吁大家共建開放、合作、有信任的社區(qū)環(huán)境。一起加油合作,讓世界因AGI的到來變得更好!“
面壁智能首席科學(xué)家劉知遠(yuǎn)此前也在知乎對此進(jìn)行了回應(yīng),他表示“已經(jīng)比較確信Llama3-V是對我們MiniCPM-Llama3-V 2.5套殼?!?/p>
劉知遠(yuǎn)同時(shí)強(qiáng)調(diào):人工智能的飛速發(fā)展離不開全球算法、數(shù)據(jù)與模型的開源共享,讓人們始終可以站在SOTA的肩上持續(xù)前進(jìn)。我們這次開源的MiniCPM-Llama3-V 2.5就用到了最新的Llama3作為語言模型基座。而開源共享的基石是對開源協(xié)議的遵守,對其他貢獻(xiàn)者的信任,對前人成果的尊重和致敬,Llama3-V團(tuán)隊(duì)無疑嚴(yán)重破壞了這一點(diǎn)。他們在受到質(zhì)疑后已在Huggingface刪庫,該團(tuán)隊(duì)三人中的兩位也只是斯坦福大學(xué)本科生,未來還有很長的路,如果知錯(cuò)能改,善莫大焉?!?/p>
面壁智能是一家人工智能大模型技術(shù)創(chuàng)新與應(yīng)用落地企業(yè),創(chuàng)立于2022年8月,創(chuàng)始團(tuán)隊(duì)主要來自清華。面壁智能聯(lián)合創(chuàng)始人、首席科學(xué)家劉知遠(yuǎn)是清華大學(xué)計(jì)算機(jī)系長聘副教授,智源青年科學(xué)家,主要研究方向?yàn)樽匀徽Z言處理、知識(shí)圖譜和社會(huì)計(jì)算。
2023年4月面壁智能完成由知乎領(lǐng)投的數(shù)千萬元天使輪融資,種子輪股東智譜AI繼續(xù)跟投。隨后,2023年6月,知乎公司合伙人、CTO李大海出任面壁智能的董事和CEO,負(fù)責(zé)面壁智能公司的戰(zhàn)略發(fā)展和運(yùn)營管理。
另外,面壁智能透露,今年5月該公司剛剛完成了新一輪數(shù)億元融資。(宜月)
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )