Tout dirigeant qui envisage un agent IA se pose la même question, et c'est la bonne : et s'il écrit une bêtise à mon client ? Pas en théorie, pas à un testeur, mais à ce client fidèle depuis des années qui lit maintenant une réponse avec le mauvais prix.
On peut répondre à cette question sans risquer une seule conversation. Cela s'appelle un test fantôme, ou mode test : l'agent travaille sur vos messages réels entrants, et les réponses vous parviennent à vous, pas au client. Cet article explique comment se déroule un tel test, ce qu'il faut regarder dans le rapport qu'il produit, et comment corriger ce qui ne vous plaît pas.
Qu'est-ce qu'un test fantôme
Un test fantôme est une période où l'agent est entièrement connecté et pleinement actif, mais muet vers l'extérieur. Les messages réels arrivent par vos canaux. L'agent les lit, consulte vos données, écrit la réponse qu'il aurait envoyée, et s'arrête là. La réponse est enregistrée pour vous. Le client ne reçoit rien de l'agent et continue à parler avec votre équipe exactement comme avant.
Cela le distingue des deux choses avec lesquelles on le confond souvent. Une démo montre un dialogue préparé par le fournisseur. Un bac à sable vous laisse saisir vous-même des questions de test. Un test fantôme utilise les questions que vos clients posent réellement, avec les mots qu'ils emploient réellement, y compris le message confus envoyé à une heure du matin avec trois questions sur une seule ligne.
Pourquoi une démo prouve moins qu'on ne le pense
Les démos scénarisées échouent sur le même point dans chaque secteur : les vrais clients ne posent pas la question comme le script l'attend. Ils demandent un prix pour quelque chose qui n'est pas sur la liste. Ils changent d'avis en cours de route. Ils écrivent dans une langue que personne n'avait prévue. Ils demandent une remise parce qu'ils sont venus l'an dernier.
Ce sont ces cas précis qui déterminent si un agent IA est utile à votre activité, et aucun n'apparaît dans une démo. Ils apparaissent dans votre propre messagerie, c'est pourquoi le test doit s'y dérouler.
Les trois étapes : installation, mode test, lancement
Chez SVI, chaque équipe d'agents passe en service de la même façon, dans cet ordre :
- Installation. La solution ou l'équipe est ajoutée à votre compte et vos canaux sont connectés : chat du site, Telegram, WhatsApp, Instagram, e-mail. Cette étape est à notre charge.
- Mode test, le test fantôme. Les agents répondent à vos messages réels, vos clients ne voient pas les réponses, et vous les voyez toutes, avec un rapport. Cette étape aussi est à notre charge.
- Lancement. Quand les réponses ressemblent à celles que vous donneriez vous-même, vous activez les agents, et ils commencent à parler aux clients. Le paiement ne démarre qu'à ce moment.
L'ordre compte plus qu'il ne paraît. Comme le paiement ne démarre qu'au lancement, personne n'a besoin de débattre si l'agent est assez bon dans l'abstrait : vous lisez d'abord son travail sur vos propres conversations, et vous décidez ensuite. Les trois mêmes étapes s'appliquent à une solution prête à l'emploi comme à une équipe que vous assemblez vous-même dans le constructeur d'agents.
Que lire dans le rapport de test
Un test ne vaut que ce que vous y vérifiez. Lire chaque réponse une par une est possible les premiers jours et inutile ensuite ; mieux vaut lire en ayant quelques questions précises en tête.
- Les faits. Repérez les réponses qui contiennent un prix, une date, une adresse ou une condition, et comparez-les à vos propres données. C'est là qu'un réglage faible se voit le plus vite.
- Les transferts. Regardez où l'agent a décidé de passer la conversation à une personne. Trop rarement est un risque, bien trop souvent signifie qu'il lui manque des données qu'il devrait avoir.
- Les refus. Trouvez les moments où l'agent a dit qu'il ne savait pas. Chacun est un manque dans ce que vous lui avez donné, et souvent peu coûteux à combler.
- Le ton. Lisez trois ou quatre réponses à voix haute. Cela ressemble-t-il à votre entreprise, ou à un centre d'appels d'un autre pays ?
- Les demandes recueillies. Une réservation ou une commande doit arriver complète : quoi, quand, qui, comment le contacter. Une demande à moitié faite est du travail pour votre équipe, pas un soulagement.
- Les cas difficiles. Réclamations, réservations de groupe, demandes inhabituelles, personnes qui veulent parler à votre responsable. Ce sont les cas où vous voulez voir l'agent se retirer, pas improviser.
Ce que vous ne trouverez pas dans un rapport, c'est une note. Le test ne vous dit pas s'il faut lancer ; il montre ce qui aurait été dit, et la décision reste la vôtre.
Que changer, et comment
Ce que les dirigeants attendent le moins : corriger une réponse qui ne vous a pas plu n'est pas une tâche de développement. Vous décrivez le changement avec des mots simples, comme vous l'expliqueriez à un nouvel employé, et la règle change. Pas de code, pas de ticket, pas de mise à jour.
- Une mauvaise réponse. Donnez à l'agent la donnée manquante : le bon tarif, les vrais horaires d'ouverture, la condition qu'il ne connaissait pas.
- Une réponse allée trop loin. Dites où se trouve la limite : ne jamais promettre une date sans confirmation, ne jamais parler d'autres clients, ne jamais accorder une remise.
- Trop ou trop peu de transferts. Nommez les cas qu'une personne doit voir, et laissez l'agent conclure le reste.
- Le mauvais ton. Décrivez comment vous voulez sonner : plus court, plus chaleureux, plus formel, avec la formule d'accueil que vous utilisez toujours.
Ensuite, vous observez les jours suivants de messages et voyez si le changement tient. Plusieurs allers-retours de ce type sont normaux, et c'est exactement ce qui transforme un assistant générique en un agent qui travaille à votre façon. Les règles peuvent aussi se définir rôle par rôle dans le constructeur, où Mai assemble une équipe à partir de 19 rôles, chacun arrivant avec des règles prêtes que vous ajustez plutôt que d'écrire de zéro.
Les limites qui tiennent, quels que soient vos réglages
Certaines choses ne sont pas des réglages, et c'est volontaire. Dans toute solution SVI, les agents répondent uniquement à partir des propres données de l'entreprise et n'inventent ni prix ni créneaux disponibles. Ils n'accordent jamais une remise que le dirigeant n'a pas approuvée, et ne révèlent jamais les données d'un client à un autre. Une réservation reste une demande jusqu'à ce qu'une personne la confirme. Quand l'agent n'est pas sûr, il demande ou transmet la conversation à une personne avec un court résumé.
Une autre limite mérite d'être dite à voix haute, car elle revient dans les rapports de test : l'agent ne se fait pas passer pour un humain et ne nie pas être un assistant IA si un client le demande. Il peut rester parfaitement naturel tout en étant honnête sur ce qu'il est, et les clients s'en soucient bien moins que les dirigeants ne le craignent.
Ce qu'il faut pour démarrer un test
Moins qu'un projet logiciel. Un seul canal suffit pour commencer, par exemple Instagram Direct. Un seul scénario, celui qui occupe le plus de temps à votre équipe. Et 30 à 50 conversations réelles pour comparer les réponses, que presque toute entreprise a déjà dans son historique de discussions.
Il est utile aussi de noter votre propre point de départ pendant une semaine avant le lancement, sans rien changer : à quelle vitesse vous répondez aujourd'hui, combien de messages arrivent hors des heures d'ouverture, combien de conversations se terminent sans réponse de personne. Sans ces chiffres, la comparaison après le lancement tourne au débat d'impressions. La page réceptionniste IA montre à quoi ressemble un tel point de départ pour un spa, un salon, un hôtel ou une clinique.
Parlez à un agent qui est déjà passé par là
Si vous préférez voir le résultat plutôt que lire sur la méthode : Andaman Lotus Spa est une entreprise de démonstration fictive avec un vrai agent fonctionnel derrière elle. Demandez un prix, réservez un soin pour samedi soir, changez d'avis, changez de langue en plein milieu de la conversation, essayez de lui faire promettre quelque chose qu'il ne devrait pas. C'est exactement ce genre d'épreuve qu'un test fantôme fait pour vous, à grande échelle, sur vos propres clients.
Comment commencer
Ouvrez le constructeur d'agents pour voir quels rôles votre équipe aurait besoin et fixer leurs règles avec vos propres mots, ou commencez par une conversation avec Mai : décrivez votre activité, et elle mettra en place la solution et démarrera le mode test avec vous. L'installation et le test sont à notre charge, donc la première chose qu'on vous demandera de juger sera le travail de l'agent sur vos propres messages.