Chargement…

LFM2.5-24B-A2B tient tête à Qwen

LFM2.5-24B-A2B tient tête à Qwen

Liquid AI sort aujourd'hui LFM2.5-24B-A2B, un MoE de 24B paramètres dont seulement 2B sont actifs par token, pensé pour faire tourner des agents en local.

Même architecture que LFM2 (40 couches, 64 experts en top-4, hybride convolutions courtes + GQA), mais le contexte passe de 32K à 131K tokens, le pré-entraînement double (environ 33T tokens) et le modèle devient reasoning-only.

Et surtout, la dernière phase d'entraînement est du RL fait directement dans des harness d'agents : OpenClaw, Hermes Agent, Pi, OpenCode. Pour moi, le vrai sujet est là.

Sur les benchmarks (chiffres déclarés par Liquid AI, pas encore vérifiés de façon indépendante), le profil est très net :

  • Tool use : 48,09 sur LiveClaw contre 38,19 pour Qwen3.6-35B-A3B, et 27,69 sur AutomationBench là où le suivant plafonne à 8,72.
  • Instruction following : premier sur IFEval (96,75), IFBench et Multi-IF.
  • Code et connaissances : nettement derrière, 51 sur SWE-Bench Verified contre 66,2 pour Qwen.

Liquid AI le reconnaît d'ailleurs lui-même : pour les tâches lourdes en connaissances, branchez-le sur du RAG ou de la recherche web.

Côté vitesse, il annonce 184 tok/s sur un M5 Max et 114 tok/s sur un Ryzen AI Max+ 395.

Donc ce n'est pas un modèle pour coder à votre place, c'est un modèle d'orchestration : lire une consigne, appeler les bons outils, enchaîner les étapes sans saigner un forfait API.

Et c'est exactement là que le coût par tâche compte plus que le coût par token : un agent qui tourne en continu sur votre machine, avec 2B actifs, chaque token de raisonnement ne coûte quasiment rien.

Je ne l'ai pas encore testé. Mais il est open-weight, avec support llama.cpp, MLX, vLLM et SGLang dès le premier jour, donc la question va vite trancher : est-ce que ces 48 points sur LiveClaw tiennent sur des chaînes d'outils réelles, beaucoup moins propres qu'un benchmark ?

FAQ

Qu'est-ce qui différencie LFM2.5-24B-A2B d'un modèle classique de 24B paramètres ?

C'est un modèle MoE où seulement 2B paramètres sont actifs par token sur les 24B totaux, ce qui permet des vitesses d'inférence proches d'un petit modèle tout en gardant la capacité d'un plus gros. Concrètement, cela se traduit par un coût de calcul très faible par token généré, idéal pour un agent qui tourne en continu.

Ce modèle peut-il remplacer un assistant de code comme Qwen ou Claude ?

Non, ce n'est pas son point fort : il reste nettement derrière sur SWE-Bench Verified (51 contre 66,2 pour Qwen3.6-35B-A3B) et plus largement sur les tâches de connaissances pures. Liquid AI recommande lui-même de le coupler à du RAG ou à une recherche web pour compenser ce manque.

Pourquoi l'entraînement en RL dans des harness d'agents change-t-il la donne ?

Plutôt que d'optimiser uniquement sur du texte ou des benchmarks académiques, le modèle a été affiné directement dans des environnements comme OpenClaw ou OpenCode, où il doit réellement appeler des outils et enchaîner des étapes. C'est ce qui explique ses scores élevés en tool use et en instruction following, des compétences plus proches de l'usage réel d'un agent que de la génération de texte classique.

Quelles machines peuvent faire tourner ce modèle correctement en local ?

Liquid AI annonce environ 184 tokens par seconde sur un M5 Max et 114 tokens par seconde sur un Ryzen AI Max+ 395, des performances rendues possibles par les seulement 2B paramètres actifs par token. Le modèle est aussi compatible dès sa sortie avec llama.cpp, MLX, vLLM et SGLang, donc accessible sans attendre des portages tiers.

Les benchmarks annoncés sont-ils fiables ?

Ce sont des chiffres communiqués par Liquid AI lui-même, pas encore validés par des tests indépendants, donc à prendre avec prudence. La vraie question, comme le souligne l'article, est de savoir si ces scores se maintiennent sur des chaînes d'outils réelles, souvent plus chaotiques qu'un benchmark contrôlé.

Pour quel usage ce modèle est-il réellement taillé ?

Il est pensé comme un orchestrateur d'agents capable de lire une consigne, choisir les bons outils et enchaîner les étapes, plutôt que comme un générateur de code ou un modèle de connaissances générales. Son faible coût par token actif en fait un candidat intéressant pour des agents qui tournent en continu sans faire exploser une facture d'API.


Poursuivre la lecture

Nvidia rachète Hugging Face ? News
#nvidia#hugginface#ia

Nvidia rachète Hugging Face ?

Nvidia rachèterait Hugging Face pour 12,9 milliards de dollars selon une rumeur non confirmée. Décryptage d'un deal qui dépasse largement la simple logique du chiffre d'affaires.

Alexandre P.
Test de bonsai 27b Dev
#bonsai 27b#benchmark#code agentique

Test de bonsai 27b

Bonsai 27B en local avec Claude Code : configuration LM Studio, llama.cpp et test grandeur nature en codant un Pong from scratch.

Alexandre P.