[01] Outils
DeepSeek ouvre le moteur d’inférence qui sert ses propres services
DeepInfer est publié sous Apache 2.0 : un moteur bâti à l’origine sur vLLM, avec des emprunts à SGLang et TensorRT-LLM, qui sert la production de DeepSeek à grande échelle, cette première version se limitant à l’inférence hors ligne. Le point de contrôle par défaut est DeepSeek-V4.1-Flash-1017, les benchmarks sont mesurés sur 4 GPU SM100 en prefill et 64 en decode, et les dépendances couvrent NVIDIA comme Ascend. Le dépôt affiche 14 600 étoiles et 1 400 forks le lendemain de sa publication.
Pourquoi ça compte Un laboratoire qui publie le moteur de son propre trafic donne accès aux optimisations de noyaux et de communication qu’on ne lit d’habitude que dans des papiers : de quoi calibrer un moteur maison sur des chiffres de production plutôt que sur des débits marketing.