#mixture of experts
Artículos
Modelos
Thinking Machines Lab lanza Inkling 2 Mini, un modelo de pesos abiertos de 26.400 millones de parámetros con 3.400 millones activos
Thinking Machines Lab publica Inkling 2 Mini con Apache 2.0: 26,4 B de parámetros, 3,4 B activos, 1 M de contexto.