La branche d’intelligence artificielle de KRAFTON AI, sous le nom de KRAFTON, une entreprise de jeux coréenne, a annoncé cette semaine une version préliminaire du Raon-1 mini. Il s’agit d’un modèle entraîné à zéro, et la version officielle ainsi que des modèles ultérieurs plus importants sont en cours de développement. Dans le marché des modèles de base dominé par les géants, l’arrivée d’un modèle propriétaire d’une entreprise de jeux révèle déjà une ambition transversale.
30B-A4B « petit et complet »
Raon-1 mini utilise une architecture MoE et intègre l’attention linéaire, soutenant le décodage par inférence ; sa taille totale est indiquée comme 30B-A4B – c’est-à-dire environ 30 milliards de paramètres, avec environ 4 milliards activés à chaque fois. Il se concentre sur le coréen tout en prenant en compte l’anglais, et est open source sous la licence Apache 2.0. Le site officiel propose également une tentative gratuite limitée d’API.
Le rapport de notes fourni par KRAFTON AI est très clair : la version préliminaire est à un niveau égal avec le Muse Glimmer 30B de Meta dans les tâches de programmation et d’agents intelligents, mais elle fonctionne plus rapidement, consomme moins de mémoire et permet des conversations naturelles. En d’autres termes, elle cherche à créer une différence en termes d’efficacité et de rapport qualité-prix dans la même catégorie de taille.
Pourquoi les entreprises de jeux vidéo se livrent-elles aux modèles ?
Une société de jeux qui a commencé sa carrière avec *Jedi: Survivor* intervient elle-même pour développer les modèles 3D. Il n’est pas difficile de comprendre pourquoi. Le développement de jeux a en effet de nombreuses exigences en matière de génération de scénarios, de dialogues des PNJ, d’art et d’aide technique pour le code. Une base de développement propriétaire permet non seulement de réduire les coûts, mais aussi de contrôler les aspects techniques ; en outre, rendre les modèles open source et les déployer en essai est une bonne manière de gagner en notoriété à faible coût et de recruter des développeurs ainsi que l’écosystème.
Lorsque des géants tels que Meta et Google font de plus en plus grands modèles de base, KRAFTON choisit de commencer à partir d’une taille de 30B, un niveau « suffisant et facile à déployer », visant peut-être des utilisateurs qui souhaitent à la fois des capacités de localisation en coréen et ne veulent pas être liés aux géants. La capacité du Raon-1 mini à tenir ses promesses, ainsi que les performances de la version officielle et des modèles plus grands, seront des indicateurs clés, et marqueront également le premier pas vers l’idée que « les studios de jeux peuvent également créer une base solide ».