L’intelligence artificielle ne cesse de repousser les limites, notamment dans le domaine de la programmation informatique. La start-up française Mistral AI, un sérieux concurrent d’OpenAI et son célèbre ChatGPT, vient de franchir un nouveau cap avec Codestral, son modèle de langage IA spécialisé dans la génération de code.
Codestral, Un Puissant Outil D’Assistance À La Programmation
Présenté le 29 mai dernier, Codestral a été spécifiquement entraîné pour générer du code informatique. Grâce à une API et des instructions fournies par l’utilisateur, il assiste les développeurs dans la rédaction de leur code. Impressionnant par son étendue, Codestral maîtrise plus de 80 langages de programmation, y compris des langages moins courants comme le Swift.
Bien que relativement « petit » avec ses 22 milliards de paramètres, Codestral surpasse ses principaux rivaux lors de différents tests :
- CodeLlama (Meta) et ses 70 milliards de paramètres
- Llama 3 70B
- DeepSeek Coder 33B
Des Performances Impressionnantes Sur Divers Langages
Des chercheurs indépendants ont commencé à tester Codestral. Sur le benchmark HumanEval réalisé par Mikhail Evtikhiev de JetBrains, le modèle français obtient un score de 73,75%, devançant même GPT-4 (72,05%). Sur les 4 tests effectués en Python, l’un des langages les plus répandus, Codestral décroche à 3 reprises la première place.
Si Codestral est dépassé par Meta sur le langage SQL, il reprend l’avantage sur 6 autres langages testés via HumanEval :
- C++
- Java
- PHP
- TypeScript
Un Potentiel Immense Pour Booster La Productivité Des Développeurs
L’IA et la programmation forment un duo très prometteur. Un modèle de langage comme Codestral, dédié au code, ouvre de nombreuses perspectives pour augmenter la productivité des développeurs :
- Réduction des bugs et erreurs
- Suggestions et autocomplétion de code
- Assistance à la rédaction
Une Approche Prudente Et Réfléchie De Mistral AI
Malgré des résultats très encourageants, Mistral AI fait preuve de prudence quant au déploiement de Codestral. Le modèle est pour l’instant disponible uniquement pour de la recherche et des tests, sous une licence spéciale « Mistral AI Non-Production ». Il est néanmoins accessible sur la plateforme Hugging Face, via une API, ainsi que sur Le Chat, l’agent conversationnel de Mistral AI.
Nous voulons avancer pas à pas, de manière réfléchie et responsable. Codestral représente une avancée majeure, mais il est important de bien en évaluer les impacts avant un déploiement à grande échelle.
– Arthur Durand, CEO de Mistral AI
Avec Codestral, Mistral AI montre encore une fois son potentiel pour démocratiser l’IA et en faire un outil au service de tous. Nul doute que les développeurs du monde entier suivront avec intérêt l’évolution de ce modèle français très prometteur dans les mois à venir.
