Pas le temps de lire l'article ? Voici ce qu'il faut retenir.
Moonshot AI a publié les poids complets de Kimi K3 sur Hugging Face, permettant son utilisation et adaptation par tous les développeurs.
1
Modèle à poids ouvert — Kimi K3 est le plus grand modèle à poids ouvert dévoilé, avec 2 800 milliards de paramètres.
2
Architecture Mixture of Experts — Son architecture active 16 de ses 896 « experts » par token pour limiter le coût réel de l’inférence.
3
Fenêtre de contexte — Sa fenêtre de contexte est portée à un million de tokens, permettant de traiter des bases de code entières ou de longs documents en une seule requête.
💡
Pourquoi c'est important : Cette publication ouvre la voie à un déploiement et une adaptation par n'importe quel développeur, sans dépendre des serveurs de Moonshot.