北京時(shí)間7月24日，F(xiàn)acebook母公司Meta Platforms Inc.發(fā)布了全新人工智能模型“Llama 3.1”，這是該公司目前為止推出的最強(qiáng)大開源模型，號稱能夠比肩最好的閉源模型。

與此同時(shí)，Meta的CEO馬克·扎克伯格發(fā)表公開信，闡述了他為何支持AI開源。

扎克伯格稱其為“藝術(shù)的起點(diǎn)”，表示Llama 3.1擁有大范圍新的能力，包括改善推理以幫助處理復(fù)雜的數(shù)學(xué)問題或即時(shí)合成一整本書。

Meta公司在150多個(gè)涵蓋多種語言的基準(zhǔn)數(shù)據(jù)集上評估了性能，Llama 3.1模型在各個(gè)基準(zhǔn)上皆有不錯(cuò)的表現(xiàn)。此外，還進(jìn)行了廣泛的人工評估，在真實(shí)場景中將Llama 3.1與競爭模型進(jìn)行了比較。實(shí)驗(yàn)評估表明，Llama 3.1能夠在一系列任務(wù)中與領(lǐng)先的基礎(chǔ)模型相媲美，包括GPT-4、GPT-4o和Claude3.5Sonnet。

Llama 3.1 405B與其它模型多個(gè)基準(zhǔn)的評估對比Meta官網(wǎng)

官方稱，開發(fā)人員提高了模型對用戶指令的響應(yīng)能力、質(zhì)量和詳細(xì)指令遵循能力，同時(shí)確保高水平的安全性，使其能夠跨功能擴(kuò)展微調(diào)數(shù)據(jù)量。

根據(jù)Meta發(fā)布信息，Llama 3.1模型包含4050億個(gè)參數(shù)，是近年來參數(shù)規(guī)模最大的模型之一。這些模型支持多種語言，上下文長度顯著增加，達(dá)到128K，使用最先進(jìn)的工具，推理能力也更強(qiáng)。這使得我們的最新模型能夠支持高級用例，例如長篇文本摘要、多語言對話代理和編碼助手。

Llama 3.1模型對比Meta官網(wǎng)文件

作為Meta迄今為止最大的模型，Llama 3.1從16位(BF16)量化為8位(FP8)數(shù)字，有效降低了所需的計(jì)算要求并允許模型在單個(gè)服務(wù)器節(jié)點(diǎn)內(nèi)運(yùn)行，使用超過16000個(gè)H100 GPU進(jìn)行訓(xùn)練，這是全球迄今為止性能最強(qiáng)大、參數(shù)規(guī)模最大的開源模型。

該模型主要用于為Meta內(nèi)部和外部開發(fā)人員的聊天機(jī)器人提供支持，具備廣泛的新功能，包括改進(jìn)的推理能力，幫助解決復(fù)雜的數(shù)學(xué)問題或瞬間綜合整本書的文本。它還具有生成式AI功能，可以通過文本提示生成圖像。

同時(shí)，扎克伯格發(fā)表公開信《Open Source AI Is the Path Forward》，闡述了“開源為何對開發(fā)者、對Meta和對世界都有好處”。

自ChatGPT爆火以來，將其開源的呼聲未曾斷絕?？删驮贑hatGPT2發(fā)布之后，OpenAI選擇了閉源發(fā)展。阿里云、智譜和清華EKG、百川智能等，選擇了開源，華為則出于數(shù)據(jù)隱私和商業(yè)收益考慮，盤古大模型就選擇了閉源，在這場全球大模型軍備賽中，有關(guān)開源發(fā)展和閉源深耕的爭論不止不休。

扎克伯格公開信中提出，Llama需要發(fā)展成為一個(gè)完整的生態(tài)系統(tǒng)，包括工具、效率提高、芯片優(yōu)化和其他集成，這是僅依靠Meta自己使用做不到的；Llama有信心在高度競爭中保持優(yōu)勢，而成為行業(yè)標(biāo)準(zhǔn)的道路是一代又一代地保持競爭力、高效和開放；最后，出售AI模型訪問權(quán)限不是公司的商業(yè)模式。這意味著公開發(fā)布Llama不會削弱企業(yè)的收入、可持續(xù)性或投資研究的能力。

扎克伯格還指出，開源將確保全世界更多的人能夠享受AI帶來的好處和機(jī)會，權(quán)力不會集中在少數(shù)公司手中，并且該技術(shù)可以更均勻、更安全地應(yīng)用于整個(gè)社會。

扎克伯格認(rèn)為最好的策略是建立一個(gè)強(qiáng)大的開放生態(tài)系統(tǒng)，使得行業(yè)龍頭公司與政府和盟友密切合作，以確保他們能夠最好地利用最新進(jìn)展，并在長期內(nèi)實(shí)現(xiàn)可持續(xù)的先發(fā)優(yōu)勢。

關(guān)于中國，他在文中提到，“有些人認(rèn)為，美國必須采用閉源，以防止中國獲得這些模型”，但“這是行不通的，只會讓美國及其盟友處于不利地位”。

據(jù)彭博社報(bào)道，扎克伯格還補(bǔ)充說，認(rèn)為美國在人工智能方面會領(lǐng)先中國數(shù)年也是不現(xiàn)實(shí)的。但他指出，即使是數(shù)月的小幅領(lǐng)先，也可以隨著時(shí)間的推移“累積”，讓美國占據(jù)明顯優(yōu)勢。

本文系觀察者網(wǎng)獨(dú)家稿件，未經(jīng)授權(quán)，不得轉(zhuǎn)載。