„Hugging Face“ spalio 15 d. paskelbė „Meta“ sukurtą „Muse Spark Open“. Mišraus ekspertų modelis turi apie 816 mlrd. parametrų, tačiau vienam žetonui aktyvina apie 42 mlrd. Jis priima tekstą, vaizdus, garsą ir vaizdo įrašus, generuoja tekstą, o konteksto langas siekia iki milijono žetonų.
Modelio svoriai pateikti BF16 ir NVFP4 formatais pagal specialią „Muse Model License“ licenciją. Kūrėjai gali modelį vykdyti savo infrastruktūroje arba per trečiųjų šalių paslaugas, tačiau aparatinės įrangos poreikis didelis. „Meta“ modelį apibūdina kaip pritaikytą programavimo agentams, ilgiems derinimo darbams ir įrankių naudojimui; šie pajėgumai bei saugos rezultatai kol kas remiasi kūrėjo paskelbtais vertinimais.
Kodėl tai svarbu?
INVIS vertinimu, svarbus ne vien modelio dydis: vienoje atvirų svorių sistemoje sujungti keturi įvesties tipai ir ilgas kontekstas plečia savarankiškai valdomų agentų galimybes.
Redakcijos pastaba
Parengta pagal „Hugging Face“ pristatymą ir oficialią „Meta“ modelio kortelę.