Une fois les premiers agents lancés, une question finit toujours par se poser : est-ce que cela vaut vraiment le coup ? L'impression générale est souvent positive, mais une impression ne suffit pas pour décider de garder un agent, d'en ajouter d'autres ou de passer à un forfait supérieur.
La bonne nouvelle, c'est qu'il n'est pas nécessaire de construire un tableau de bord complexe. Pour une PME, cinq familles d'indicateurs suffisent, à condition de respecter une règle : mesurer avant de lancer l'agent, pour avoir un point de comparaison.
La règle d'or : un point de départ#
Sans mesure initiale, toute évaluation repose sur la mémoire, qui embellit ou noircit selon l'humeur du moment. Avant de lancer un agent, notez pendant une ou deux semaines :
- le temps que vous passez sur la tâche ;
- le nombre de fois où elle est faite en retard ou oubliée ;
- le délai moyen entre l'événement et l'action (par exemple entre l'échéance d'une facture et sa relance) ;
- les erreurs constatées.
Une estimation honnête vaut mieux que rien. Un simple tableau suffit :
| Tâche | Temps par semaine | Oublis ou retards par mois | Délai habituel | Erreurs constatées |
|---|---|---|---|---|
| Relances de devis | ||||
| Comptes rendus de réunion | ||||
| Rangement des factures |
Famille 1 : le temps gagné#
Ce qu'on mesure#
Le temps que vous passiez sur la tâche avant, moins le temps que vous passez maintenant à vérifier et corriger le travail de l'agent.
Comment le mesurer#
Pendant une semaine, notez le temps passé à relire, corriger ou compléter les résultats de l'agent. Comparez avec votre point de départ.
Le piège#
Oublier le temps de supervision. Un agent qui vous fait gagner deux heures mais vous en fait passer une à corriger ne vous fait gagner qu'une heure. C'est déjà bien, mais c'est le vrai chiffre. Ce temps de supervision diminue généralement après les premières semaines, à mesure que vous ajoutez des règles.
Famille 2 : la fiabilité#
Ce qu'on mesure#
La part des résultats utilisables sans retouche. Un taux simple : sur les vingt derniers résultats, combien avez-vous utilisés tels quels, combien avez-vous corrigés, combien avez-vous jetés ?
Les seuils indicatifs#
Il n'y a pas de seuil universel, mais une grille de lecture peut aider :
| Résultats utilisables tels quels | Lecture |
|---|---|
| Presque tous | L'agent est fiable ; vous pouvez réduire la fréquence de vos vérifications |
| Une large majorité | Bon niveau ; regardez les cas corrigés pour ajouter des règles |
| Environ la moitié | Le brief manque de précision ou la tâche est trop ambiguë |
| Une minorité | Revoyez la tâche : découpez-la ou choisissez-en une autre |
Comment l'améliorer#
Pour chaque résultat corrigé, notez la raison : information manquante, mauvais ton, exception non prévue, donnée erronée en entrée. Les raisons qui reviennent indiquent la règle à ajouter. L'article sur les erreurs à éviter quand on automatise détaille les corrections les plus courantes.
Famille 3 : les délais#
Ce qu'on mesure#
Le temps entre un événement et l'action correspondante. Exemples :
- délai entre l'échéance d'une facture et la première relance ;
- délai entre la fin d'une réunion et l'envoi du compte rendu ;
- délai entre la réception d'une demande client et la première réponse ;
- délai entre une intervention et l'émission de la facture.
Pourquoi c'est souvent l'indicateur le plus parlant#
Les agents ne font pas forcément les choses « mieux » qu'un humain attentif, mais ils les font à l'heure, systématiquement. Pour des tâches comme les relances ou la facturation, le gain sur les délais a des effets directs sur la trésorerie et la satisfaction des clients. Un modèle comme la facture après intervention agit précisément sur ce délai.
Famille 4 : les oublis évités#
Ce qu'on mesure#
Le nombre de tâches qui n'auraient pas été faites sans l'agent : relances oubliées, échéances manquées, demandes restées sans réponse, avis clients ignorés.
Comment le mesurer#
C'est l'indicateur le plus difficile à mesurer, car un oubli évité ne laisse pas de trace. Deux approches :
- comparer avec le point de départ : combien d'oublis par mois avant, combien maintenant ;
- lire le journal d'exécution : chaque action de l'agent est une action qui, avant, dépendait de votre mémoire.
Pour certains agents, comme les e-mails restés sans réponse ou les échéances de contrats, c'est même leur principale raison d'être.
Famille 5 : le coût rapporté à l'utilité#
Ce qu'on mesure#
Le prix mensuel de l'agent, comparé à la valeur du temps gagné et des effets obtenus.
Comment le calculer simplement#
- Prenez le temps gagné par mois (famille 1).
- Attribuez-lui une valeur horaire raisonnable : le coût horaire chargé de la personne qui faisait la tâche, ou, pour un dirigeant, la valeur d'une heure consacrée à vendre ou à produire.
- Comparez avec le prix mensuel de l'agent.
Exemple fictif, pour illustrer le calcul : un agent à 19 € par mois qui fait gagner deux heures par mois à une personne dont l'heure est valorisée à 30 € produit une valeur d'environ 60 €. Il est rentable sur le seul critère du temps, sans compter les délais raccourcis et les oublis évités.
Sur Future Agent, le prix de chaque agent est fixé au lancement et affiché dans votre dashboard, avec le nombre d'exécutions et la durée de chacune. Les forfaits Pro et Studio incluent plusieurs agents et réduisent le prix des suivants, ce qui change le calcul quand vous en avez plusieurs.
Les indicateurs de fonctionnement à surveiller#
En plus de ces cinq familles, quelques signaux techniques méritent un coup d'œil régulier :
- les exécutions en échec : un agent qui échoue souvent signale un problème de connexion (un outil déconnecté, un mot de passe changé) ou une donnée d'entrée inattendue ;
- les exécutions sans résultat : un agent de veille qui ne trouve jamais rien est peut-être mal ciblé ;
- la durée des exécutions : une durée qui s'allonge peut indiquer un volume croissant de données à traiter ;
- l'espace de stockage : fichiers, tables et sites comptent dans l'espace de votre forfait (1, 25 ou 200 Go selon le forfait).
Le dashboard de Future Agent affiche ces informations pour chaque agent, ainsi que le journal détaillé de chaque exécution.
Une revue mensuelle de quinze minutes#
Une fois par mois, passez en revue vos agents avec cette grille :
| Agent | Temps gagné | Fiabilité | Délais | Oublis évités | Décision |
|---|---|---|---|---|---|
| Garder / Ajuster / Arrêter |
Trois décisions possibles :
- garder l'agent tel quel s'il remplit son rôle ;
- ajuster sa description si la fiabilité ou le périmètre peuvent être améliorés ;
- arrêter l'agent s'il ne sert plus ou si la tâche a disparu. Un agent arrêté ne coûte plus rien.
Vous pouvez d'ailleurs automatiser une partie de cette revue : un agent comme le reporting hebdo de direction ou le tableau de bord mensuel peut rassembler vos indicateurs d'activité dans un document unique.
Un exemple de revue complète#
Voici à quoi peut ressembler la revue mensuelle d'un cabinet de conseil de cinq personnes qui utilise quatre agents. Les observations sont illustratives :
- Comptes rendus de mission : la quasi-totalité est envoyée après une relecture rapide ; les consultants ne rédigent plus de compte rendu de zéro. Décision : garder.
- Relance des propositions envoyées : les relances partent toutes à l'heure, mais deux clients ont trouvé le second message trop insistant. Décision : ajuster le ton du deuxième palier.
- Veille sectorielle : les notes sont lues, mais une source revient sans cesse et apporte peu. Décision : ajuster la liste des sources.
- Préparation de réunions : peu utilisée, car les consultants préparent leurs rendez-vous eux-mêmes. Décision : arrêter et réessayer dans quelques mois avec un brief différent.
Quinze minutes, quatre décisions, et un dispositif qui s'améliore chaque mois au lieu de s'empiler.
Ce qu'il ne faut pas mesurer#
Certains indicateurs paraissent séduisants mais ne disent pas grand-chose :
- le nombre d'agents actifs : dix agents inutiles valent moins qu'un agent qui change votre semaine ;
- le nombre d'exécutions : un agent qui tourne toutes les heures sans rien produire d'utile n'est pas performant ;
- la longueur des livrables : un rapport de deux pages lu vaut mieux qu'un rapport de dix pages ignoré.
Mesurer les effets indirects#
Certains bénéfices échappent aux chiffres mais méritent d'être notés lors de la revue mensuelle :
- la charge mentale réduite (« je n'y pense plus ») ;
- la meilleure image auprès des clients (réponses rapides, relances régulières) ;
- la continuité pendant les congés ou les absences ;
- la documentation des processus, qui facilite l'arrivée d'un nouveau collaborateur.
Demandez simplement à chaque personne concernée : « Si on arrêtait cet agent demain, qu'est-ce qui vous manquerait ? » La réponse est souvent plus éclairante qu'un tableau.
En résumé#
- Mesurez la tâche avant de lancer l'agent.
- Suivez cinq familles : temps gagné, fiabilité, délais, oublis évités, coût rapporté à l'utilité.
- Surveillez les échecs et les exécutions sans résultat.
- Faites une revue mensuelle de quinze minutes avec une décision par agent.
- Notez les effets indirects en posant une question simple à l'équipe.
Si vous démarrez, le plan en 30 jours pour commencer avec l'IA intègre cette mesure dès la première semaine.