Kimi obtient 96,2% à un test d'analytique sur une base 1C et devient une solution de secours en cas de blocage de Claude

Le développeur 1C Alexandre Novikov s'est retrouvé sans Claude : son compte a été bloqué au milieu de la période payée, et le solde ne lui a pas été remboursé. Craignant que la même chose arrive avec GPT, il a décidé de chercher à l'avance un remplaçant parmi les modèles chinois, et a commencé par Kimi. La raison est simple : l'abonnement se règle en roubles avec une carte « Мир », et aucun VPN n'est nécessaire. Il a mené le test sur la même base démo et selon les mêmes règles que celles qu'il avait appliquées à ChatGPT, Claude et « Алиса AI для бизнеса ». Résultat de Kimi : 96,2% de concordance avec la référence.

Comment le test est construit, et le paiement

L'abonnement Kimi au tarif Pro a coûté 3300 roubles. L'auteur met en garde : le Runet regorge de liens vers des intermédiaires, il faut donc vérifier que l'on paie bien sur le site officiel. Le paiement est passé normalement.

L'environnement est simple : l'application de bureau Kimi pour Windows, avec une interface en anglais. L'authentification se fait via le site, puis l'application se lie au compte. La connexion par COM n'a pas convenu, car la base se trouvait sur un autre ordinateur. Alexandre Novikov a donc utilisé la passerelle 1C « Жёлтый мост ».

La base est la démo « Управление торговлей 11 », édition 11.5.25.112, accompagnée d'une référence préparée à l'avance. Les dix questions couvrent les référentiels, les documents, les stocks, les règlements mutuels et des tâches à plusieurs conditions.

Résultats par question

Kimi a traité intégralement neuf questions sur dix. Elle a compté correctement les entrepôts et la nomenclature hors groupes, énuméré les cinq organisations et affiché les cinq dernières ventes comptabilisées, avec des numéros, des dates et des montants identiques à la référence. Elle a aussi trouvé correctement les commandes clients d'août 2022, le stock de LED Camelion 1,5 sur l'entrepôt voulu, ainsi que les dettes d'« Ассоль » et d'« Альтаир ». Pour janvier et février 2023, le modèle a ventilé les montants entre RUB et USD. Sur la tâche des stocks à partir de 1000 sans ventes en 2023–2024, elle a trouvé les six positions, sans aucune en trop.

Le point faible est la question sur le top 3 des produits par ventes en février 2023. Les produits sont les bons, mais deux montants sont faux : d'où le score de 50%. L'auteur attribue l'erreur à la séparation des devises. Après un prompt précisé, les chiffres ont correspondu à la référence. D'où la conclusion : sur les conditions complexes, mieux vaut formuler d'emblée une requête détaillée.

Côté vitesse, le modèle a effectué 24 appels à la base, et les requêtes ont pris environ 45 secondes. Ce n'est pas la durée totale du dialogue : la préparation de la requête n'y est pas incluse.

Écriture dans 1C et développement

Kimi prend en charge les serveurs MCP distants via HTTP. Si un outil d'écriture est connecté et autorisé, le modèle peut non seulement lire, mais aussi modifier les données. Selon l'auteur, c'est un avantage sur « Алиса AI для бизнеса », qui ne sait pour l'instant que lire. Pour les bases de production, c'est une arme à double tranchant : l'écriture ne doit être ouverte qu'en connaissance de cause, et seulement dans un environnement de test.

Côté développement, Alexandre Novikov a demandé au modèle de récupérer lui-même une extension depuis 1C, de la retoucher et de l'enregistrer. La modification était de complexité moyenne, et Kimi s'en est sortie. Mais l'auteur promet de se prononcer plus tard sur la question de savoir si le modèle convient comme outil de développement quotidien : le test visait avant tout l'analytique.

Limites et conclusion pratique

Le test est étroit : une seule base démo, dix questions et un seul auteur. Ce n'est pas un benchmark, ni un substitut à une évaluation indépendante, mais un aperçu pratique des tâches d'un analyste 1C. Pour le développement, les données sont pour l'instant insuffisantes, et le résultat dépend de la qualité du prompt.

En pratique, Kimi apparaît comme une assurance crédible en cas de fermeture de l'accès aux modèles occidentaux. Pour l'analytique sur une configuration 1C standard, elle est déjà adaptée, et pour l'écriture de code, l'auteur la juge tout à fait capable. Pour les équipes russes, ce résultat compte aussi côté infrastructure : le paiement en roubles, la connexion via une passerelle et la prise en charge de MCP permettent d'intégrer le modèle au processus sans contournements.