Søgning
2 briefing-resultat(er) for »mamba«
Diskussion: Hvilke radikale arkitekturændringer er på vej?
Ud over kendte forbedringer som N-gram og MTP peges på MAMBA-lignende arkitekturer og hybrid-modeller. Spørgsmålet er hvor langt man kan gå …
Tysk SooFi-team lancerer åben MoE-model med Mamba-arkitektur
Soofi S 30B-A3B er en hybrid Mamba–Transformer-model med 30B parametre, målrettet tysk og engelsk. Modellen udkommer som open-source, hvilket styrker …