快科技4月6日消息,美國科技巨擘Meta重磅推出其迄今最為強(qiáng)大的開源AI模型Llama 4,恰逢Llama 3上市一周年之際。
據(jù)悉,Llama 4系列采用了先進(jìn)的混合專家架構(gòu),這一架構(gòu)在模型訓(xùn)練及用戶查詢回答過程中展現(xiàn)出更高效率,通過將模型劃分為多個(gè)專注于特定任務(wù)的專家”子模型,實(shí)現(xiàn)精準(zhǔn)而高效的處理。
目前,Llama 4擁有Scout和Maverick兩個(gè)版本,官方宣稱它們?yōu)槠駷橹棺顬橄冗M(jìn)的模型,且在多模態(tài)領(lǐng)域獨(dú)領(lǐng)風(fēng)騷。
Scout版本配備170億活躍參數(shù)、16個(gè)專家”模型及1090億總參數(shù);而Maverick版本同樣擁有170億活躍參數(shù),但專家”模型數(shù)量增加至128個(gè),總參數(shù)量飆升至4000億。
不僅如此,Meta還在積極訓(xùn)練更為強(qiáng)大的Behemoth模型,力圖將其打造成為全球最為智能的大模型之一。
Meta首席執(zhí)行官扎克伯格表示:他們的目標(biāo)是建立世界領(lǐng)先的人工智能,將其開源,并使其普遍可用,以便世界上每個(gè)人都能受益。
(舉報(bào))