Aleph Alpha presentó Kolibri, un modelo de inteligencia artificial de pesos abiertos construido en Europa, con una ventana de contexto de hasta 1.048.576 tokens y un enfoque en sectores regulados.
Un modelo europeo con 1.048.576 tokens de contexto
La compañía, con sede en Heidelberg, Alemania, informó que Kolibri tiene 78.100 millones de parámetros y puede procesar hasta 1.048.576 tokens en su ventana de contexto, una capacidad que suele resumirse como un millón de tokens.
El lanzamiento ocurrió el 3 de octubre de 2026 y apunta, según la empresa, a la administración pública, la industria, el sector aeroespacial y la defensa. Aleph Alpha también señala que el modelo fue ajustado para alemán e inglés, con un peso importante de contenido alemán durante su entrenamiento.
Arquitectura Mixture-of-Experts y licencia Apache 2.0
Kolibri usa una arquitectura de transformer Mixture-of-Experts, conocida por la sigla MoE, en la que el sistema activa solo una parte de sus parámetros para procesar cada token. Aunque la cifra total alcanza los 78.100 millones, Aleph Alpha indica que aproximadamente 3.460 millones están activos por token.
La empresa distribuye el modelo bajo la licencia Apache 2.0 y calcula que requiere aproximadamente 78 GB de almacenamiento en formato FP8. También indicó que lo entrenó con 768 GPU NVIDIA B200 en infraestructura de Alemania y Finlandia.
El desempeño que reportó la empresa
Junto con el modelo, Aleph Alpha publicó un informe técnico de 189 páginas sobre su arquitectura, sus métodos de entrenamiento y los resultados de evaluación.
En ese documento, la empresa reportó que Kolibri obtuvo 96,9% en AIME 2025, una evaluación asociada con problemas de competición matemática. Ese resultado figura entre las cifras destacadas del lanzamiento, aunque fue atribuido por la propia compañía.
