Comparaison D'outils

40 cas GigaChat de Sber : ce que dit vraiment notre benchmark

27 min de lecture

Sber – la plus grande banque russe, qui développe aussi sa propre famille de modèles d’IA, GigaChat – a publié un dossier promotionnel : quarante études de cas d’entreprises ayant adopté GigaChat et qui en détaillent les bénéfices. EdTech, MedTech, HRTech, cybersécurité, PropTech. De jolies fiches, des chiffres précis, de vraies startups.

Le dossier promotionnel de Sber

Sur l’image : le visuel « Un pas en avant » de l’accélérateur Sber500×GigaChat – 40 startups dans 9 secteurs. Effets annoncés : processus jusqu’à x16 plus rapides, coûts réduits jusqu’à 90 %, automatisation des tâches jusqu’à 95 %, chiffre d’affaires en hausse jusqu’à 30 %.

Nous disposons d’un benchmark : 29 modèles, 4 308 évaluations indépendantes sur des tâches managériales. GigaChat y occupe la dernière place, 29e sur 29 à l’issue de la deuxième vague de tests. Cela crée une situation intéressante.

Non pas parce que Sber mentirait. Les cas sont réels, les startups existent, l’automatisation fonctionne. La vraie question est ailleurs : était-ce le modèle optimal pour les tâches que ces entreprises devaient résoudre ?

Lire la suite
40 cas GigaChat de Sber : ce que dit vraiment notre benchmark
Quand les benchmarks IA perdent leur sens : comment choisir un modèle
8 min

Quand les benchmarks IA perdent leur sens : comment choisir un modèle

En mars, nous avons décortiqué le fonctionnement des benchmarks LLM – GPQA Diamond, SWE-bench, Chatbot Arena. En avril, nous avons testé 53 modèles et découvert que l’écart de qualité entre les meilleurs modèles se compte en dixièmes de point, alors que l’écart de prix s’étale sur trois ordres de grandeur.

Vient maintenant la question suivante. Et si les benchmarks eux-mêmes cessaient de fonctionner ?

99 % de la qualité pour 1,4 % du prix : ce qui ne va pas sur le marché des modèles IA
9 min

99 % de la qualité pour 1,4 % du prix : ce qui ne va pas sur le marché des modèles IA

La plupart des managers choisissent un modèle IA de la même manière : ils prennent le plus cher disponible. La logique est limpide – plus cher, c’est mieux. C’est ainsi que fonctionnait le logiciel d’entreprise depuis vingt ans.

Le marché des modèles IA en 2026 fonctionne différemment. Le coût d’une requête varie de 0,0001 $ à 0,17 $ – trois ordres de grandeur. Et la différence réelle de qualité entre les dix meilleurs modèles ? 0,24 point sur une échelle de cinq. Pendant ce temps, Wharton / GBK Collective constate qu’un tiers des projets IA en entreprise ne dépasse pas le stade du pilote. Et Epoch AI montre que seuls 5,6 % des utilisateurs exploitent réellement l’IA en profondeur.

La question n’est peut-être pas de savoir quel modèle est le meilleur, mais plutôt si payer le prix fort pour un modèle premium produit un résultat proportionnellement meilleur pour les tâches managériales courantes.

Nous avons vérifié. La réponse s’est avérée plus brutale que prévu.

Tirer le maximum de YandexGPT : ce qui marche et ce qui échoue
15 min

Tirer le maximum de YandexGPT : ce qui marche et ce qui échoue

En Russie, des millions de personnes utilisent Alice chaque jour – non par choix, mais parce qu’elle est gratuite, intégrée au navigateur Yandex et fonctionne sans VPN. YandexGPT, le modèle qui anime Alice, est le meilleur modèle russe de notre benchmark, mais reste loin derrière GPT-5.4. (Pour un lecteur extérieur : Yandex est le géant russe de la tech, l’équivalent local de Google, et Alice est son assistant conversationnel grand public.)

Peut-on en obtenir des réponses proches de celles de GPT, à condition d’apprendre à bien formuler ses demandes ? Nous l’avons vérifié dans une expérience : dix techniques de prompt, six tâches de management, deux juges LLM indépendants. Réponse courte : oui, c’est possible – mais toutes les techniques ne marchent pas, et certaines aggravent la situation.

Voici des gabarits concrets que vous pouvez copier dans le chat dès maintenant, et les anti-patterns à éviter.

GigaChat Ultra Thinking : il reflechit plus longtemps – et repond moins bien ?
9 min

GigaChat Ultra Thinking : il reflechit plus longtemps – et repond moins bien ?

GigaChat Ultra Thinking reflechit plus longtemps et consomme davantage de ressources de calcul. Il resout les taches manageriales 3,3 % moins bien que la version sans raisonnement. Ce n’est ni un bug ni un hasard – c’est un schema documente par des travaux academiques au cours des deux dernieres annees.

Cette semaine, Sber a presente GigaChat Ultra – son nouveau modele phare avec un mode raisonnement (Thinking). Le modele est disponible gratuitement dans la version web, les applications mobiles et via le bot Telegram. Nous avons immediatement ajoute les deux variantes a notre etude des modeles IA pour managers : nous les avons fait passer a travers les 32 scenarios selon notre methodologie unifiee, evalues par nos deux juges LLM, et compares aux 52 autres modeles.

Kimi de Moonshot en 2026 : K3, K2.6, K2.7-Code et agents pour le manager
21 min

Kimi de Moonshot en 2026 : K3, K2.6, K2.7-Code et agents pour le manager

Un modèle chinois open source peut-il rivaliser avec les fleurons propriétaires d’OpenAI et d’Anthropic ? D’après notre évaluation indépendante, le nouveau Kimi K3 (sorti le 16 juillet 2026) a pris la 2e place sur 47 modèles. Seul GPT-5.6 Sol le devance – et, contrairement à ce fleuron propriétaire, K3 est un modèle ouvert, bien moins cher, que vous pouvez exécuter sur votre propre infrastructure : la souveraineté des données et la conformité RGPD restent entre vos mains.

Chat Z.AI (GLM-5) en 2026 : le modèle chinois qui se fait passer pour Claude
17 min

Chat Z.AI (GLM-5) en 2026 : le modèle chinois qui se fait passer pour Claude

Le 6 février 2026, un modèle anonyme baptisé « Pony Alpha » est apparu sur la plateforme OpenRouter – gratuit, sans aucune indication sur ses créateurs. La communauté IA s’est immédiatement lancée dans son identification. Ses capacités en programmation rivalisaient avec Claude Opus 4.5. À la question « qui es-tu ? », le modèle répondait : « Je suis GLM ». Mais lorsqu’on lui a demandé de rédiger une page web se présentant – il a écrit : « I am Claude, created by Anthropic ».

Comment évaluer la qualité des LLM en 2026 : guide des benchmarks pour managers
7 min

Comment évaluer la qualité des LLM en 2026 : guide des benchmarks pour managers

Imaginez que vous choisissez une voiture de fonction pour votre équipe. Un concessionnaire dit : « Notre voiture est la plus rapide. » Un autre : « Nous avons la meilleure consommation. » Un troisième : « Nous sommes leaders en sécurité. » Ils ont tous raison – mais chacun mesure autre chose. Sans comprendre ce qui est mesuré exactement et comment, vous ne pouvez pas comparer les offres objectivement.