Aleph Alpha rilascia Kolibri-1, MoE tedesco-inglese da 78B con pesi Apache 2.0

In una frase Il 3 ottobre Aleph Alpha pubblica su Hugging Face Kolibri-1: modello mixture of experts da 78 miliardi di parametri totali e 3,46 attivi, bilingue tedesco e inglese, pesi in FP8 con licenza Apache 2.0, contesto nativo di 262.144 token estendibile a circa 1 milione.

Verificato Fonte ufficiale

CondividiLinkedIn X

Aleph Alpha, la societa tedesca che si posiziona sull AI sovrana europea, ha rilasciato Kolibri-1, il suo primo modello pubblico di questa generazione. I pesi sono scaricabili da Hugging Face con licenza Apache 2.0, quindi aziende ed enti possono farlo girare sui propri server, anche completamente offline, senza dipendere da un fornitore extraeuropeo.

Il modello e grande ma leggero da eseguire: su 78 miliardi di parametri ne usa circa 3,5 per ogni parola generata, grazie all architettura mixture of experts. Parla solo tedesco e inglese e lavora solo su testo. E stato addestrato da zero su GPU NVIDIA in datacenter in Germania e Finlandia.

I pesi in formato FP8 occupano circa 78 GB: bastano una singola GPU di fascia alta come H200 o B200, oppure due A100 o H100 da 80 GB. Sul piano aziendale, Aleph Alpha ha firmato un accordo vincolante di fusione con la canadese Cohere, soggetto ad approvazione regolatoria.