La société a testé Codestral Mamba sur des capacités de récupération en contexte allant jusqu'à 256 000 jetons – soit deux fois le nombre observé dans GPT4o d'OpenAI – et a constaté que sa version 7B fonctionnait mieux que les modèles open source dans plusieurs tests d'analyse comparative, tels que HumanEval, MBPP, Spider et CruxE.
La version à plus grand paramètre 22B du nouveau modèle a également obtenu des résultats nettement meilleurs que CodeLlama-34B, à l'exception du benchmark CruxE.
Alors que la version 7B est disponible sous la licence Apache 2.0, la version 22B plus grande est disponible sous une licence commerciale pour l'auto-déploiement ou une licence communautaire à des fins de test.
GIPHY App Key not set. Please check settings