ChatGPT的爆火引爆了AI行業(yè)，全球科技巨頭爭相殺入這一領(lǐng)域展開混戰(zhàn)。周五，Meta也宣布推出大型語言模型LLaMA，加入到由微軟、谷歌等科技巨頭主導的AI“軍備競賽”中。

當?shù)貢r間2月24日，Meta宣布將推出針對研究社區(qū)的“Meta人工智能大型語言模型”系統(tǒng)（Large Language Model Meta AI），簡稱“LLaMA”。

同ChatGPT、New Bing不同，LLaMA并不是一個任何人都可以與之對話的產(chǎn)品，也并未接入任何Meta應(yīng)用。更為確切地說，該產(chǎn)品將是一個開源的“研究工具”。

【資料圖】

公司CEO扎克伯格在社交媒體上表示，LLaMA旨在幫助研究人員推進研究工作，LLM（大型語言模型）在文本生成、問題回答、書面材料總結(jié)，以及自動證明數(shù)學定理、預測蛋白質(zhì)結(jié)構(gòu)等更復雜的方面也有很大的發(fā)展前景。

1、開源的“研究工具”

Meta表示，LLaMA可以在非商業(yè)許可下提供給政府、社區(qū)和學術(shù)界的研究人員和實體工作者，正在接受研究人員的申請。

此外，LLaMA將提供底層代碼供用戶使用，因此用戶可以自行調(diào)整模型，并將其用于與研究相關(guān)的用例。與之截然不同的是，谷歌旗下的DeepMind和OpenAI并不公開訓練代碼。

該公司還表示，LLaMA作為一個基礎(chǔ)模型被設(shè)計成多功能的，可以應(yīng)用于許多不同的用例，而不是為特定任務(wù)設(shè)計的微調(diào)模型。

2、比GPT3.5性能更強

根據(jù)Meta官網(wǎng)介紹，LLaMA包含4個基礎(chǔ)模型，參數(shù)分別為70億、130億、330億和650億。其中，LLaMA 65B 和 LLaMA 33B 在 1.4 萬億個 tokens 上訓練，而最小的模型 LLaMA 7B 也經(jīng)過了 1 萬億個 tokens 的訓練。

Meta表示，在大多數(shù)基準測試中，參數(shù)小的多的LLaMA-13B的性能優(yōu)于GPT3.5的前身GPT3-175B，而LLaMA-65B更可與業(yè)內(nèi)最佳的Chinchilla-70B和PaLM-540B競爭。值得一提的是，近期大火的ChatGPT便是由GPT3.5提供支持。

Meta 還提及，LLaMA-13B對算力的要求“低得多”，可以在單個數(shù)據(jù)中心級GPU（Nvidia Tesla V100）上運行。

扎克伯格寫道：

“Meta 致力于這種開放的研究模式，我們將向 AI 研究社區(qū)提供我們的新模型?！?/p>

值得一提的是，去年5月，Meta 也曾推出過大型語言模型 OPT-175B。該項目同樣也是針對研究人員的，這構(gòu)成了其聊天機器人 blenterbot 新迭代的基礎(chǔ)。后來，該公司還推出了一款名為“卡拉狄加”(Galactica) 的模型，但因經(jīng)常分享偏見和不準確的信息而遭到下架。

據(jù)媒體報道，扎克伯格已將人工智能作為公司內(nèi)部的首要任務(wù)，其本人也經(jīng)常在財報電話會議和采訪中談?wù)撍鼘Ω倪M Meta 產(chǎn)品的重要性。媒體分析稱，雖然現(xiàn)在 LLaMA 沒有在 Meta 產(chǎn)品中使用，但未來不排除使用的可能。

風險提示及免責條款 市場有風險，投資需謹慎。本文不構(gòu)成個人投資建議，也未考慮到個別用戶特殊的投資目標、財務(wù)狀況或需要。用戶應(yīng)考慮本文中的任何意見、觀點或結(jié)論是否符合其特定狀況。據(jù)此投資，責任自負。

關(guān)鍵詞： 語言模型 研究人員 人工智能