@artificialanlys · Thinking Machines a publié Inkling 2 Mini, qui se classe 20e à l’Artificial Analysis Intelligence Index : un transformer à boucles à poids ouverts, situé sur la frontière de Pareto entre intelligence et nombre de paramètres actifs. Inkling 2 Mini est un modèle mixture-of-experts de 26B paramètres au total, dont 5,4B actifs. Ce nombre de 5,4B paramètres actifs comprend trois passages dans ses couches en boucle ; il utilise 3,1B poids uniques par token de texte et est assez petit pour fonctionner sur un MacBook ou un DGX Spark.
Apolinario / @multimodalart · D’après mes premiers tests, Inkling 2 Small (26B-A3B) est, dans l’esprit, le Qwen3.8 35B-A3B dont on n’a jamais réussi à rapprocher les performances de celles de Qwen3.8 27B (meilleur sur certains points, moins bon sur d’autres), tout en étant beaucoup plus rapide en tant que MoE. Et c’est le premier transformer à boucles que j’explore 🤓
Guido Appenzeller / @appenz · Waouh, c’est vraiment impressionnant pour 5,5 milliards de paramètres actifs. Le raisonnement fait la différence. Et c’est un transformer en boucle. Félicitations à @thinkymachines !
@artificialanlys · Inkling 2 Mini égale Qwen3.8 27B (xhigh) et Nanbeige4.3-33B sur l’Intelligence Index, avec respectivement environ 5 et 6 fois moins de paramètres actifs. Il se situe sur la frontière de Pareto entre intelligence et taille, que l’on considère les paramètres totaux ou actifs.
Newsletter
L’essentiel du Fil
Recevez l’essentiel de l’actualité tech chaque matin dans votre boîte mail gratuitement.