Test de Deepseek v4 Pro

Je vous en parlais hier et j'appréhendais un peu.

Mais je redonne un peu de contexte et je vous explique pourquoi.

Deepseek a sorti sa v4 et alors que j'anticipais sur des performances moyennes parce que non seulement ils change d'architecture software mais aussi hardware, en passant sur du materiel 100% chinois via les puces Huawei Ascend.

Je me suis dis qu'ils auraient un double challenge:

• Refactor de leur architecture IA
• Adaptation sur du nouveau matériel sans drivers/frameworks Nvidia

Mais finalement après essais, ça se passe bien mieux que prévu.

Jusqu'à présent je lui ai fait faire des petites tâches et il s'en sort très bien.

Ai-je eu raison ou tort ?

Bon ou mauvais ? Un peu des deux !

En fait je pense que sur la partie "imagination" je ne dois pas trop me tromper et c'est aussi l'avis de mes confrères. Cette IA aura du mal à faire une chose qu'elle ne sait pas déjà faire.

En même temps c'est comme nous les humains, dès que c'est nouveau, on doit s'habituer...

Et puis, entre nous, à quoi ça sert de demander à ces models "Génère moi un chat qui tient un stand de ramen dans un univers en 3D au japon féodal. Il doit y avoir des passants qui viennent commander à manger et il faut servir ces passants..." 🙃

Mais lorsque je demande à Deepseek de faire du code avec le détail de ce que je veux, quand je lui demande de monter en version mes dépendances, de s'assurer du fonctionnement etc... IL EST EXCELLENT ! 🚀

Vraiment, Deepseek fait très bien son boulot et n'a pas à rougir.

Je lui ai fait faire la montée en version de 2 repositories: il a pris ~3-5 minutes sur ces projets, il a tout vérifié et fait ses PR, j'ai testé tout est ok !

A raison de ~13-14 centimes par run pour ces tâches... pour du Deepseek v4 Pro High, c'est très raisonnable !

Si vous voulez aller voir son boulot: https://github.com/aluzed/vite-react-ts-supabase