北京時(shí)間7月24日，F(xiàn)acebook母公司Meta Platforms Inc.發(fā)布了全新人工智能模型“Llama 3.1”，這是該公司目前為止推出的最強(qiáng)大開(kāi)源模型，號(hào)稱(chēng)能夠比肩最好的閉源模型。

與此同時(shí)，Meta的CEO馬克·扎克伯格發(fā)表公開(kāi)信，闡述了他為何支持AI開(kāi)源。

扎克伯格稱(chēng)其為“藝術(shù)的起點(diǎn)”，表示Llama 3.1擁有大范圍新的能力，包括改善推理以幫助處理復(fù)雜的數(shù)學(xué)問(wèn)題或即時(shí)合成一整本書(shū)。

Meta公司在150多個(gè)涵蓋多種語(yǔ)言的基準(zhǔn)數(shù)據(jù)集上評(píng)估了性能，Llama 3.1模型在各個(gè)基準(zhǔn)上皆有不錯(cuò)的表現(xiàn)。此外，還進(jìn)行了廣泛的人工評(píng)估，在真實(shí)場(chǎng)景中將Llama 3.1與競(jìng)爭(zhēng)模型進(jìn)行了比較。實(shí)驗(yàn)評(píng)估表明，Llama 3.1能夠在一系列任務(wù)中與領(lǐng)先的基礎(chǔ)模型相媲美，包括GPT-4、GPT-4o和Claude3.5Sonnet。

Llama 3.1 405B與其它模型多個(gè)基準(zhǔn)的評(píng)估對(duì)比Meta官網(wǎng)

官方稱(chēng)，開(kāi)發(fā)人員提高了模型對(duì)用戶(hù)指令的響應(yīng)能力、質(zhì)量和詳細(xì)指令遵循能力，同時(shí)確保高水平的安全性，使其能夠跨功能擴(kuò)展微調(diào)數(shù)據(jù)量。

根據(jù)Meta發(fā)布信息，Llama 3.1模型包含4050億個(gè)參數(shù)，是近年來(lái)參數(shù)規(guī)模最大的模型之一。這些模型支持多種語(yǔ)言，上下文長(zhǎng)度顯著增加，達(dá)到128K，使用最先進(jìn)的工具，推理能力也更強(qiáng)。這使得我們的最新模型能夠支持高級(jí)用例，例如長(zhǎng)篇文本摘要、多語(yǔ)言對(duì)話(huà)代理和編碼助手。

Llama 3.1模型對(duì)比Meta官網(wǎng)文件

作為Meta迄今為止最大的模型，Llama 3.1從16位(BF16)量化為8位(FP8)數(shù)字，有效降低了所需的計(jì)算要求并允許模型在單個(gè)服務(wù)器節(jié)點(diǎn)內(nèi)運(yùn)行，使用超過(guò)16000個(gè)H100 GPU進(jìn)行訓(xùn)練，這是全球迄今為止性能最強(qiáng)大、參數(shù)規(guī)模最大的開(kāi)源模型。

該模型主要用于為Meta內(nèi)部和外部開(kāi)發(fā)人員的聊天機(jī)器人提供支持，具備廣泛的新功能，包括改進(jìn)的推理能力，幫助解決復(fù)雜的數(shù)學(xué)問(wèn)題或瞬間綜合整本書(shū)的文本。它還具有生成式AI功能，可以通過(guò)文本提示生成圖像。

同時(shí)，扎克伯格發(fā)表公開(kāi)信《Open Source AI Is the Path Forward》，闡述了“開(kāi)源為何對(duì)開(kāi)發(fā)者、對(duì)Meta和對(duì)世界都有好處”。

自ChatGPT爆火以來(lái)，將其開(kāi)源的呼聲未曾斷絕?？删驮贑hatGPT2發(fā)布之后，OpenAI選擇了閉源發(fā)展。阿里云、智譜和清華EKG、百川智能等，選擇了開(kāi)源，華為則出于數(shù)據(jù)隱私和商業(yè)收益考慮，盤(pán)古大模型就選擇了閉源，在這場(chǎng)全球大模型軍備賽中，有關(guān)開(kāi)源發(fā)展和閉源深耕的爭(zhēng)論不止不休。

扎克伯格公開(kāi)信中提出，Llama需要發(fā)展成為一個(gè)完整的生態(tài)系統(tǒng)，包括工具、效率提高、芯片優(yōu)化和其他集成，這是僅依靠Meta自己使用做不到的；Llama有信心在高度競(jìng)爭(zhēng)中保持優(yōu)勢(shì)，而成為行業(yè)標(biāo)準(zhǔn)的道路是一代又一代地保持競(jìng)爭(zhēng)力、高效和開(kāi)放；最后，出售AI模型訪問(wèn)權(quán)限不是公司的商業(yè)模式。這意味著公開(kāi)發(fā)布Llama不會(huì)削弱企業(yè)的收入、可持續(xù)性或投資研究的能力。

扎克伯格還指出，開(kāi)源將確保全世界更多的人能夠享受AI帶來(lái)的好處和機(jī)會(huì)，權(quán)力不會(huì)集中在少數(shù)公司手中，并且該技術(shù)可以更均勻、更安全地應(yīng)用于整個(gè)社會(huì)。

扎克伯格認(rèn)為最好的策略是建立一個(gè)強(qiáng)大的開(kāi)放生態(tài)系統(tǒng)，使得行業(yè)龍頭公司與政府和盟友密切合作，以確保他們能夠最好地利用最新進(jìn)展，并在長(zhǎng)期內(nèi)實(shí)現(xiàn)可持續(xù)的先發(fā)優(yōu)勢(shì)。

關(guān)于中國(guó)，他在文中提到，“有些人認(rèn)為，美國(guó)必須采用閉源，以防止中國(guó)獲得這些模型”，但“這是行不通的，只會(huì)讓美國(guó)及其盟友處于不利地位”。

據(jù)彭博社報(bào)道，扎克伯格還補(bǔ)充說(shuō)，認(rèn)為美國(guó)在人工智能方面會(huì)領(lǐng)先中國(guó)數(shù)年也是不現(xiàn)實(shí)的。但他指出，即使是數(shù)月的小幅領(lǐng)先，也可以隨著時(shí)間的推移“累積”，讓美國(guó)占據(jù)明顯優(yōu)勢(shì)。

本文系觀察者網(wǎng)獨(dú)家稿件，未經(jīng)授權(quán)，不得轉(zhuǎn)載。