NEXUS : un contrôle de sécurité à l'exécution pour les agents LLM dotés d'outils — F1 de 0.949

En juillet 2026, un préprint consacré à NEXUS (Neural EXecution Utility and Safety) a été publié sur arXiv. Il s'agit d'un moniteur de sécurité à l'exécution pour les agents LLM qui utilisent des outils. NEXUS intercepte chaque action de l'agent et choisit l'une des quatre réponses possibles : autoriser, bloquer, demander une confirmation ou exiger une révision. Sur un benchmark synthétique de 128 scénarios, il affiche un F1 de 0,949 pour une latence médiane de 0,205 ms.

Comment fonctionne le moniteur

NEXUS combine trois mécanismes de contrôle et en tire une réaction graduée. Selon le préprint publié sur arXiv, il réunit des règles de sécurité déterministes, une inspection des arguments d'appel au niveau de chaque paramètre et une régression logistique calibrée qui calcule un risk-score pour l'escalade.

C'est ce risk-score qui permet de dépasser le choix binaire « autorisé/interdit » au profit d'une politique d'intervention à quatre niveaux. Plutôt que de simplement bloquer un appel suspect, le moniteur peut demander une confirmation à l'agent ou renvoyer l'action pour reformulation.

• Quatre actions de politique : allow, block, request confirmation, request revision
• Trois mécanismes : règles déterministes + inspection des arguments + régression logistique pour le risk-score
• F1 = 0,949 sur un benchmark synthétique de 128 scénarios
• Précision du choix d'intervention en 4 classes : 0,6406
• Latence médiane de 0,205 ms, soit moins de 0,1 % de surcharge

Quel gain de précision face aux règles seules ?

NEXUS devance de 27,3 points de pourcentage l'approche fondée uniquement sur des règles en précision du choix d'intervention sur le benchmark synthétique. Sur ce même benchmark, son accuracy en 4 classes s'établit à 0,6406, contre un résultat nettement inférieur pour l'approche rule-only.

Le modèle a aussi été évalué sur des jeux de données externes. Sur R-Judge, NEXUS obtient un F1 de 0,861 contre 0,849 pour rule-only. Sur AgentHarm, il se situe au niveau des règles, ce que les auteurs attribuent aux limites du modèle de menaces. Sur le test d'injections indirectes de prompt (IPI), il atteint 0 % d'attaques réussies avec 99 % d'actions légitimes autorisées.

Ce que révèle le test de stress

Sur le benchmark NEXUS-Stress, « aveugle aux règles », le moniteur obtient un F1 de 0,881. Les auteurs soulignent eux-mêmes que le routage fin des interventions reste la tâche la plus difficile. Ce scénario est volontairement privé de tout appui sur des règles prédéfinies, afin de tester la capacité de généralisation du risk-score.

Les auteurs insistent par ailleurs sur le coût du contrôle. D'après le préprint, la latence médiane est de 0,205 ms et la surcharge représente moins de 0,1 % d'une boucle d'agent typique.

« NEXUS adds under 0.1% overhead to typical agent loops » — extrait de

l'abstract du préprint sur arXiv.

Le code, les benchmarks et le risk-scorer calibré sont publiés en accès libre, ce qui permet de reproduire les résultats et d'intégrer le moniteur à ses propres systèmes d'agents.

Ce que cela signifie

À mesure que les agents IA passent des réponses textuelles aux actions réelles (appels d'API, achats, manipulation de fichiers), le coût d'une erreur augmente. NEXUS montre qu'un contrôle à l'exécution peut être à la fois précis et quasi gratuit en latence, et la publication ouverte du code et des benchmarks offre à l'industrie un point de référence commun pour comparer ce type de moniteurs.

Questions fréquentes

Qu'est-ce que NEXUS ?

NEXUS (Neural EXecution Utility and Safety) est un moniteur de sécurité pour les agents LLM qui utilisent des outils. Il applique une politique d'intervention formelle et, pour chaque action de l'agent, choisit l'une des quatre décisions : autoriser, bloquer, demander une confirmation ou exiger une révision.

Dans quelle mesure NEXUS ralentit-il l'agent ?

Selon le préprint, la latence médiane est de 0,205 ms et la surcharge représente moins de 0,1 % d'un cycle de travail typique de l'agent. Autrement dit, le contrôle n'affecte pratiquement pas la vitesse.

Peut-on utiliser NEXUS dans ses propres projets ?

Oui. Les auteurs ont publié en accès libre le code, les benchmarks et le risk-scorer calibré : les résultats sont donc reproductibles et le moniteur peut être intégré à ses propres pipelines d'agents.