Todo propietario que considera un agente de IA se hace la misma pregunta, y es la correcta: ¿y si le escribe algo torpe a mi cliente? No en teoría, no a un probador, sino a ese cliente que lleva años con usted y ahora lee una respuesta con el precio equivocado.
Hay una forma de responder esa pregunta sin arriesgar una sola conversación. Se llama prueba sombra, o modo prueba: el agente trabaja sobre sus mensajes reales entrantes, y las respuestas llegan a usted en lugar del cliente. Este artículo explica cómo se realiza esa prueba, qué mirar en el informe que produce y cómo corregir lo que no le guste.
Qué es una prueba sombra
Una prueba sombra es un periodo en el que el agente está totalmente conectado y funcionando a pleno, pero callado hacia fuera. Llegan mensajes reales por sus canales. El agente los lee, revisa sus datos, escribe la respuesta que enviaría, y se detiene ahí. La respuesta queda registrada para usted. El cliente no recibe nada del agente y sigue hablando con su equipo exactamente como antes.
Eso lo distingue de las dos cosas con las que suele confundirse. Una demo muestra un diálogo preparado por el proveedor. Un entorno de pruebas le deja a usted escribir preguntas de prueba. Una prueba sombra usa las preguntas que sus clientes realmente hacen, con las palabras que realmente usan, incluidas las desordenadas de la una de la madrugada con tres preguntas en una sola línea.
Por qué una demo demuestra menos de lo que parece
Las demos con guion fallan en lo mismo en cualquier sector: los clientes reales no preguntan como espera el guion. Piden un precio por algo que no está en la lista. Cambian de opinión a mitad de camino. Escriben en un idioma que nadie planeó. Piden un descuento porque vinieron el año pasado.
Esos son los casos que deciden si un agente de IA es útil para su negocio, y ninguno aparece en una demo. Aparecen en su propia bandeja de entrada, por eso la prueba debe hacerse ahí.
Los tres pasos: instalación, modo prueba, lanzamiento
En SVI, todo equipo de agentes sale a producción de la misma manera, en este orden:
- Instalación. La solución o el equipo se añade a su cuenta y se conectan sus canales: chat del sitio, Telegram, WhatsApp, Instagram, correo. Este paso corre por nuestra cuenta.
- Modo prueba, la prueba sombra. Los agentes responden sus mensajes reales, sus clientes no ven las respuestas, y usted ve cada una de ellas más un informe. Este paso también corre por nuestra cuenta.
- Lanzamiento. Cuando las respuestas se parecen a las que usted mismo daría, activa a los agentes, y empiezan a hablar con los clientes. El pago comienza solo aquí.
El orden importa más de lo que parece. Como el pago comienza con el lanzamiento, nadie tiene que discutir si el agente es lo bastante bueno en abstracto: usted lee primero su trabajo sobre sus propias conversaciones y decide después. Los mismos tres pasos se aplican a una solución lista y a un equipo que usted mismo arma en el constructor de agentes.
Qué leer en el informe de la prueba
Una prueba vale lo que usted revise en ella. Leer cada respuesta una por una es posible los primeros días e inútil después; es mejor leer con unas preguntas concretas en mente.
- Los hechos. Elija las respuestas con un precio, una fecha, una dirección o una condición, y compárelas con sus propios datos. Ahí se nota más rápido una configuración débil.
- Las transferencias. Mire dónde el agente decidió pasar la conversación a una persona. Muy pocas veces es un riesgo, demasiadas veces significa que le faltan datos que debería tener.
- Las negativas. Encuentre los momentos en que el agente dijo que no lo sabía. Cada uno es un hueco en lo que le dio, y casi siempre barato de cerrar.
- El tono. Lea en voz alta tres o cuatro respuestas. ¿Suena como su negocio, o como un centro de llamadas de otro país?
- Las solicitudes recogidas. Una reserva o un pedido debe llegar completo: qué, cuándo, quién, cómo contactarlo. Media solicitud es trabajo para su equipo, no un alivio.
- Los casos difíciles. Quejas, reservas de grupo, pedidos inusuales, gente que pide hablar con su jefe. Estos son los casos donde quiere ver al agente apartarse, no improvisar.
Lo que no va a encontrar en un informe es una nota. La prueba no le dice si debe lanzar; muestra lo que se habría dicho, y la decisión queda en sus manos.
Qué cambiar, y cómo
Lo que menos esperan los propietarios es que corregir una respuesta que no les gustó no es una tarea de desarrollo. Usted describe el cambio con palabras simples, como le explicaría a un empleado nuevo, y la regla cambia. Sin código, sin ticket, sin versión nueva.
- Una respuesta equivocada. Déle al agente el dato que faltaba: la lista de precios correcta, el horario real de apertura, la condición que no conocía.
- Una respuesta que fue demasiado lejos. Diga dónde está el límite: nunca prometer una fecha sin confirmar, nunca hablar de otros clientes, nunca aprobar un descuento.
- Demasiadas o muy pocas transferencias. Nombre los casos que una persona debe ver, y deje que el agente cierre el resto.
- El tono equivocado. Describa cómo quiere que suene: más breve, más cálido, más formal, con el saludo que siempre usa.
Luego revisa los mensajes de los días siguientes y ve si el cambio se mantiene. Varias rondas así son normales, y son justo lo que convierte a un asistente genérico en un agente que trabaja a su manera. Las reglas también se pueden fijar rol por rol en el constructor, donde Mai arma un equipo con 19 roles, cada uno con reglas listas que usted ajusta en vez de escribir desde cero.
Los límites que se mantienen sea cual sea su configuración
Algunas cosas no son una configuración, y eso es a propósito. En toda solución SVI, los agentes responden solo con los datos propios del negocio y no inventan precios ni horarios libres. Nunca dan un descuento que el propietario no haya aprobado, y nunca revelan los datos de un cliente a otro. Una reserva sigue siendo una solicitud hasta que una persona la confirma. Cuando el agente no está seguro, pregunta o pasa la conversación a una persona con un resumen breve.
Vale la pena decir en voz alta otro límite, porque aparece en los informes de prueba: el agente no se hace pasar por humano y no niega ser un asistente de IA si un cliente lo pregunta. Puede sonar perfectamente natural y, aun así, ser honesto sobre lo que es, y a los clientes esto les importa mucho menos de lo que temen los propietarios.
Qué necesita para empezar una prueba
Menos que un proyecto de software. Un solo canal basta para empezar, por ejemplo Instagram Direct. Un solo escenario, el que más tiempo consume de su equipo. Y de 30 a 50 conversaciones reales con las que comparar las respuestas, algo que casi todo negocio ya tiene en su historial de chats.
También ayuda anotar su propia línea base durante una semana antes del lanzamiento, sin cambiar nada: qué tan rápido responde ahora, cuántos mensajes llegan fuera de horario, cuántas conversaciones terminan sin que nadie responda. Sin esos números, la comparación después del lanzamiento se vuelve una discusión de impresiones. La página recepcionista de IA muestra cómo se ve ese conjunto inicial para un spa, un salón, un hotel o una clínica.
Hable con un agente que ya pasó por esto
Si prefiere ver el resultado antes que leer sobre el método: Andaman Lotus Spa es una empresa de demostración ficticia con un agente real funcionando detrás. Pida un precio, reserve un tratamiento para el sábado por la noche, cambie de opinión, cambie de idioma a mitad de la conversación, intente empujarlo a prometer algo que no debería. Ese es exactamente el tipo de prueba que una prueba sombra hace por usted, a escala, sobre sus propios clientes.
Cómo empezar
Abra el constructor de agentes para ver qué roles necesitaría su equipo y fije sus reglas con sus propias palabras, o empiece con una conversación con Mai: describa su negocio, y ella armará la solución y empezará el modo prueba con usted. La instalación y la prueba corren por nuestra cuenta, así que lo primero que le pedirán juzgar será el trabajo del agente sobre sus propios mensajes.