Devstral Small 2 (24B) en déploiement local

Ce qu'il faut retenir

Le spécialiste code de Mistral : agents de code, édition multi-fichiers, contexte 384k. Le choix dev de la configuration Micro, et l'alternative souveraine signée d'un éditeur français.

Licence et usage commercial

Apache 2.0 : usage commercial libre, sans restriction.

Sur quelle machine ?

Devstral Small 2 (24B) demande ≈ 20 Go de VRAM : le modèle chargé en quantisation Q4, plus la marge du cache KV, qui grandit avec la longueur des conversations et le nombre d'utilisateurs simultanés. Il faut donc 1 RTX PRO 5000 Blackwell 48 Go dans un Lenovo ThinkStation P3, soit notre configuration Micro, prévue pour jusqu'à 10 utilisateurs. Ce dimensionnement est un ordre de grandeur. Nous ne partons jamais de la machine : nous cadrons vos usages, nous en déduisons le modèle, puis la configuration qui le fait tourner, et nous validons par un test sur vos données réelles.

Popularité Hugging Face : 176 608 téléchargements le mois dernier, 645 likes.

Voir la fiche Hugging Face