Moonshot AI publie en open source le modèle Kimi K3 avec 280 milliards de paramètres, affirmant un gain d’intelligence de 2,5×

D’après PANews, Moonshot AI a ouvert son modèle de langage à grande échelle Kimi K3 en open source le 27 juillet, avec 280 milliards de paramètres dans une architecture MoE (Mixture-of-Experts). Le modèle offre des capacités vision multimodales natives et prend en charge une fenêtre de contexte de 1 million de tokens. La société affirme que la nouvelle architecture permet d’obtenir environ 2,5× d’amélioration de l’intelligence pour un coût de calcul équivalent. Moonshot AI a également publié, en parallèle, des outils de support, notamment un opérateur d’attention hautes performances, une bibliothèque de communication MoE et du code d’infrastructure pour le déploiement à grande échelle d’agents.
Avertissement : Les informations figurant sur cette page peuvent provenir de sources tierces et sont fournies à titre indicatif uniquement. Elles ne reflètent pas les points de vue ou opinions de Gate et ne constituent pas un conseil financier, d’investissement ou juridique. Le trading des actifs virtuels comporte des risques élevés. Veuillez ne pas vous fonder uniquement sur les informations de cette page pour prendre vos décisions. Pour en savoir plus, consultez l’avertissement.
Commentaire
0/400
Aucun commentaire