Meta OPT-175B: un LLM da 175 miliardi di parametri aperto alla ricerca
In una frase Meta AI presenta OPT, famiglia di modelli da 125M a 175B parametri: pesi fino a 30B scaricabili, OPT-175B su richiesta per i ricercatori, tutto sotto licenza non commerciale, con logbook di training pubblico.
GPT-3 è accessibile solo via API. Meta pubblica invece un modello della stessa scala, 175 miliardi di parametri, e lo mette a disposizione di chi fa ricerca.
Insieme al modello esce anche il diario di bordo dell'addestramento, con guasti hardware, riavvii e instabilità incontrati lungo la strada.
Non è open source in senso stretto: la licenza è non commerciale e il modello più grande si ottiene solo su richiesta. È però uno dei primi passi di Meta verso i modelli a pesi aperti che porteranno a LLaMA.
Aziende
Meta AI
Tool
OPT-175B
Tag
Fonti