DeepSeek V4 est officiellement passé en disponibilité générale, introduisant une architecture Mixture-of-Experts (MoE) de 1,6 billion de paramètres qui combine des mécanismes d'attention hybrides avec la prise en charge d'un contexte allant jusqu'à un million de tokens. Cette version positionne DeepSeek comme un concurrent majeur dans le domaine des grands modèles de langage, en particulier pour les applications nécessitant de vastes fenêtres de contexte telles que l'analyse de documents juridiques, la compréhension de bases de code et la recherche scientifique. La conception MoE permet une mise à l'échelle efficace en n'activant qu'un sous-ensemble de paramètres par token, réduisant les coûts de calcul tout en maintenant des performances élevées. Le mécanisme d'attention hybride combine des motifs d'attention denses et épars pour traiter efficacement les longues séquences. Pour les développeurs et les entreprises, cela signifie l'accès à un modèle puissant capable de traiter des livres entiers ou de grands dépôts de code en une seule passe. Le statut GA suggère une préparation à la production, bien que des considérations pratiques de déploiement concernant la mémoire et la latence subsistent. Ce signal est particulièrement pertinent pour les équipes évaluant des alternatives aux modèles occidentaux pour des raisons de coût ou de souveraineté des données.
DeepSeek V4 est disponible en version générale avec une architecture Mixture-of-Experts de 1,6 billion de paramètres, des mécanismes d'attention hybrides et la prise en charge d'un contexte allant jusqu'à un million de tokens. Une avancée majeure pour les modèles d'IA chinois.