Indicateurs phares
Des règles explicites et vérifiables définissant ce qu'est un comportement correct. Rédigées une seule fois, puis utilisées par chaque test avant le déploiement et chaque audit après celui-ci. Un seul standard, appliqué de la même façon à chaque étape.
Réserver une démoIndicateurs phares comportementaux et métier
Deux dimensions, évaluées de la même manière. Les indicateurs phares comportementaux régissent la façon dont un agent communique, traite l'information et enchaîne les outils ; les indicateurs phares métier correspondent aux résultats dont il est responsable, comme la résolution au premier contact, le taux de traitement autonome ou la classification correcte de l'intention.
Adresse confirmée avant la planification
Séquentiel
Adresse relue à 01h58. Créneau proposé à 02h10.
Résolu dès le premier contact
Résultat métier
L'appelant a été transféré à une personne après la vérification de la couverture.
Cinq catégories
Chaque indicateur phare appartient à une catégorie pour que l'évaluateur sache comment le vérifier : les informations que l'agent doit porter, le ton et le registre, le moment où un outil doit se déclencher, l'ordre des opérations requis et les limites qu'il ne doit jamais franchir.
- NotesInformations que l'agent doit retenir et appliquer tout au long de la conversation.
- StyleTon, registre et persona : professionnel mais empathique, direct sans être abrupt.
- OutilConditions dans lesquelles un outil spécifique doit être invoqué, par exemple toujours vérifier via le système.
- SéquentielOrdre des opérations requis, par exemple vérifier l'identité avant toute action sur le compte.
- ContradictionLimites absolues que l'agent ne doit jamais franchir, évaluées comme un échec quel que soit le contexte.
Extraction automatique
Les règles qui régissent votre agent figurent déjà dans son prompt et son workflow : elles sont donc extraites automatiquement sous forme d'indicateurs phares, chacun étant rattaché au nœud dont il provient, ce qui signifie que rien n'est écrit deux fois et que rien ne se désynchronise.
Confirmer l'adresse avant la réservation
Calibrés avec des exemples
Chaque indicateur phare s'accompagne d'exemples positifs et négatifs qui montrent à l'évaluateur à quoi ressemblent concrètement un bon et un mauvais comportement. Un pouce levé ou baissé sur un résultat d'audit devient un nouvel exemple : la précision s'améliore donc au fil du déploiement.
Aucun prix exact annoncé
Ne communiquez jamais un prix de réparation pendant l'appel.
Rédiger des indicateurs phares efficaces
Soyez précis et vérifiable, faites correspondre la catégorie à l'intention et définissez la priorité selon l'impact.
- Soyez précis et vérifiable« Toujours confirmer le numéro de lettre de voiture avant de communiquer le statut de l'expédition » est vérifiable. « Bien gérer les demandes relatives aux expéditions » ne l'est pas.
- Faire correspondre la catégorie à l'intentionUne règle portant sur l'ordre des opérations relève de Séquentiel. Rédigée comme Style, elle sera évaluée de façon erronée.
- Priorité selon l'impactRéservez la priorité élevée aux violations porteuses d'un véritable risque opérationnel, réglementaire ou réputationnel.
- Ajoutez des exemples dès le départAjoutez un exemple positif et un exemple négatif dès la création. L'évaluateur les utilise dès le premier audit.
Questions fréquentes
Non. Les règles qui régissent un agent existent déjà dans son prompt et son workflow : elles sont donc extraites automatiquement sous forme d'indicateurs phares, chacun relié au nœud dont il provient. Vous révisez et affinez au lieu de partir d'une liste vierge, et comme chacun conserve son lien avec la source, le standard ne dérive pas par rapport à l'agent qu'il régit.
Un indicateur phare est le standard ; un test est un scénario exécuté pour le vérifier. Un indicateur phare énonce : « ne jamais proposer un tarif au-dessus du plafond ». Un test construit une conversation dans laquelle un transporteur insiste pour obtenir davantage et vérifie si l'agent a tenu bon. Une même règle peut être éprouvée par de nombreux tests, et c'est cette même règle que les audits évaluent en production.
Les indicateurs phares sont versionnés en même temps que les workflows qu'ils régissent : une modification de l'agent et une modification du standard évoluent ensemble plutôt que séparément. Comme chaque indicateur phare est relié à son nœud source, une règle dont la logique de prompt sous-jacente a changé peut être identifiée, au lieu d'évaluer silencieusement un comportement que l'agent n'a plus.
Il n'y a pas de nombre cible. Ce qui compte, c'est la couverture : vérifier que les comportements porteurs d'un risque opérationnel, de conformité ou de réputation disposent chacun d'une règle assortie d'une condition de réussite claire. La couverture s'évalue au regard des chemins de décision réels de l'agent : la réponse dépend donc de l'étendue de ce que fait l'agent et de la part qui porte à conséquence.
Par agent, et versionnés avec le workflow de cet agent : un agent de recouvrement et un agent de répartition ne sont donc pas soumis aux règles l'un de l'autre. Lorsqu'un standard est véritablement commun, comme ne jamais lire d'identifiants à voix haute, la même règle peut être appliquée à plusieurs agents afin d'être rédigée et maintenue à un seul endroit.
