當地時間周六(4月5日),美國科技巨頭Meta推出了其強大的開源人工智能(AI)模型Llama 4,Llama 4目前有兩個的版本,名為Scout和Maverick。
Meta表示,Llama 4是一個多模態大模型,它能夠處理和整合各種類型的數據,包括文本、視頻、圖像和音頻,并且可以在這些格式之間轉換內容。
Llama 4系列首次采用了混合專家(MoE)架構的模型,這種架構在訓練和回答用戶查詢時的效率更高,可以將模型劃分為多個專注于特定任務的“專家”子模型。
據Meta介紹,Scout和Maverick不僅是其“迄今為止先進的模型”,也是“多模態領域中先進的模型”。
據悉,Scout有170億個活躍參數、16個“專家”模型、1090億個總參數;Maverick也有170億個活躍參數,但有128個“專家”模型,總參數量高達4000億。
除了Scout和Maverick之外,Meta還在訓練功能更加強大的Behemoth,稱其為世界上智能的大模型之一,是“新模型中的教師”。
所有這些模型都經過了 “大量未標注的文本、圖像和視頻數據” 的訓練,以使它們具備 “廣泛的視覺理解能力”。
Scout 和Maverick模型在Llama.com網站以及Meta的合作伙伴處均可公開獲取,也可以在WhatsApp、Messenger、Instagram Direct上獲取。
Meta表示,其人工智能助手Meta AI已在40個國家更新為使用Llama 4模型。目前,多模態功能僅在美國以英語提供。
該公司首席執行官扎克伯格周六發表講話稱:“我們的目標是建立世界領先的人工智能,將其開源,并使其普遍可用,以便世界上每個人都能受益。”
“我很久以前就說過,我認為開源人工智能將成為領先的模型,而隨著Llama 4的推出,這一切已經開始發生。”他說,“Meta AI今天得到了一次重大升級。”
Meta首席產品官Chris Cox上個月表示,Llama 4的推出將讓AI智能體變得更強大,使其具備更高水平的推理和行動能力。
據知情人士透露,Llama 3已經推出一年了,而Llama4之所以遲遲未能發布,是因為在開發過程中,該模型在技術基準上沒有達到Meta的預期,尤其是在推理和數學任務方面。此外,Meta也擔心其模型在模擬人類語音對話方面不如OpenAI的模型。
Meta計劃今年斥資高達650億美元擴大其人工智能基礎設施,然而投資者正向大型科技公司施壓,要求它們展示投資帶來的實際回報。
本文鏈接:http://www.bbbearmall.com/news-134070.htmlMeta發布開源大模型Llama 4:首次采用“混合專家”架構