Deepseek v4 est sorti

Ca fait longtemps qu'on en parle et ça fait plus d'un an depuis la dernière itération de l'équipe Deepseek.

Quoi penser de Deepseek v4 ?

Déjà les benchmarks sont flatteurs mais ne vous y fiez pas... J'ai tendance à dire, le benchmark surtout si le model est entrainé dessus n'a aucune valeur.

Avant d'aller plus loin, je vais dire 2 choses:

• Je ne l'ai pas encore testé
• Je ne me fait pas d'illusions, ce n'est pas encore au top

Je ferai un benchmark ce weekend, c'est prévu.

Mais je n'ai pas encore testé le model à fond et même si cette version est rempli de technologies intéressantes, dont:

• MHC l'architecture qui permet de garder plus de cohérence dans l'attention au fil du contexte
• Engram mémoire conditionnelle pour des accès direct au lieu de faire de l'inférence sur des données et informations connues

Mais pourquoi je suis sceptique ?

Deepseek a fait le choix de changer de hardware pour passer sur une technologie chinoise 100% souveraine.

Ils utilisent désormais les puces Huawei Ascend et c'est une bonne chose. Tout comme Google qui pousse ses puces Tensor, il ne faut pas qu'un seul acteur en monopole.

D'ailleurs bravo la Chine qui crée ses propres puces et fait bien mieux que mon continent !

Mais nouvelles puces signifie qu'en plus de gérer l'architecture software, ils ont aussi du hardware à gérer ce qui rend forcément plus complexe et le chemin plus long.

Il faut donc optimiser les drivers, créer les frameworks... 😰

A quoi on doit s'attendre ?

Premièrement la puissance de calcul est en retrait, deuxièment ils n'ont pas de framework et doivent tout refaire.

Rien qu'avec ces éléments je suis persuadé qu'ils partent de trop loin pour s'attendre à un résultat incroyable.

Maintenant, le signal est très encourageant.

Cela signifie qu'ils auront une itération v5 probablement meilleure voire bien meilleure en fonction du niveau de maitrise hardware qu'ils auront.

Ils ne peuvent que faire mieux prochainement, d'ailleurs je pense qu'une version 4.x sortira dans la foulée.

Et le dernier point sur lequel je pense qu'ils ont leur mot à dire...

Le prix

Deepseek v4 est très abordable comparé aux autres modèles.

Ils l'ont même décliné sur une version "flash" encore plus abordable. Je pense que c'est une version qui viendra concurrencer les models low-cost comme Haiku.

Donc je pense que c'est un model qui a un énorme potentiel pour bientôt. Ne le jugez pas trop vite s'il n'est pas "encore" au niveau des autres car ils mènent plusieurs combats à la fois.

Mais je maintiens que Deepseek reste un de mes models favoris pour son rapport qualité/prix.