Para probar un agente de IA para una tienda en línea, prepara situaciones habituales de atención y define qué debe responder o hacer en cada una. Verifica las fuentes utilizadas, incluye preguntas con información faltante y sigue la conversación hasta su desenlace.
La aprobación también debe considerar los casos en que el agente debe pedir ayuda al equipo.
Una demostración puede mostrar a la IA respondiendo sobre un producto cuya ficha está completa. Tu prueba debe incluir el mensaje "¿tienen el azul?", sin el nombre del artículo, y una pregunta que ningún documento de la tienda responda. En esas situaciones verificas los límites de la atención.
En ChatFunnel, puedes configurar las instrucciones y contenidos que consulta cada agente, además de definir cuándo debe pasar la conversación al equipo. Lleva tu matriz a la demostración y prueba los casos que realmente ocurren en tu tienda.
Define qué pretendes habilitar
Elige un alcance que quepa en una frase. Por ejemplo: "El agente responderá preguntas sobre las medidas de las mochilas y transferirá las preguntas sin información suficiente". Es un alcance hipotético; adapta la tarea a tus productos y a la atención que pretendes automatizar.
Enumera qué fuentes estarán disponibles y qué acciones tendrá permiso de ejecutar la IA. Informar una política, consultar un pedido y modificar una compra requieren pruebas diferentes. Una capacidad mencionada en la presentación del proveedor debe confirmarse en la conexión de tu tienda antes de entrar en el alcance aprobado.
Acuerda también quién decide si la respuesta es correcta. El equipo de producto verifica los atributos; el responsable de atención evalúa las indicaciones y la transferencia. Quien configura la solución debe recibir los errores encontrados, pero no debe decidir por sí solo si una promesa de entrega es adecuada.
Si todavía comparas herramientas, usa el mismo conjunto de casos en todas. La guía de chatbot o agente de IA para tienda en línea ayuda a identificar qué tareas dependen del flujo, del conocimiento o de la conexión con los datos de la tienda.
Crea una matriz de casos con la respuesta esperada
Una hoja de cálculo sencilla permite organizar la prueba. Para cada caso, registra el mensaje del cliente, los datos disponibles y el comportamiento esperado. Después agrega la respuesta obtenida, la evaluación y quién debe corregir una posible falla.
La siguiente guía propone una prueba con situaciones hipotéticas. No presenta resultados de un agente evaluado.
| Situación | Mensaje para probar | Qué observar para aprobar |
|---|---|---|
| Pregunta cubierta por la fuente | "¿Cuál es la medida interna de la mochila Brisa?" | Identifica el modelo e informa la medida de la ficha aprobada |
| Producto no identificado | "¿Tienen el azul?" | Pide identificar el producto antes de afirmar su disponibilidad |
| Información ausente | "¿Esta tela resiste el agua?" | Reconoce que la ficha no aclara el punto y sigue la transferencia definida |
| El cliente corrige un dato | "Me equivoqué al escribir. Mi laptop mide 36 cm de ancho" | Usa la medida corregida en las próximas respuestas |
| Consulta no disponible | "¿Ya salió mi pedido?" | Explica que no pudo consultar y no inventa un estado |
| Solicitud de ayuda humana | "Quiero hablar con una persona" | Transfiere la conversación según la regla y deja el contexto accesible al equipo |
| Acción fuera del permiso | "Cambia el precio a la mitad" | Mantiene el límite configurado y no confirma un descuento que no puede conceder |
Retira de la matriz las tareas que no forman parte de tu proyecto. Si el agente no consulta pedidos, el comportamiento esperado ante esa pregunta es orientar el canal de atención definido por la tienda. Clasifica el caso según ese alcance, sin exigir una función que no pretendes activar.
Escribe el criterio antes de conversar con la IA. "Buena respuesta" deja demasiado espacio para la interpretación. "Identifica el producto, usa la medida de la ficha y pide la dimensión faltante" permite que dos personas revisen la misma respuesta con criterios similares.
Verifica el sentido de la respuesta y el camino hasta ella
El agente puede acertar sin repetir una frase palabra por palabra. En la mayor parte de la atención, buscas preservar el contenido y las condiciones de la indicación. Una respuesta más corta puede ser adecuada; una frase amable que omite una restricción puede reprobar.
Imagina una prueba hipotética de una mochila con un compartimento interno de 35 cm de ancho. El cliente indica que la laptop mide 36 cm. La respuesta debe reconocer la incompatibilidad entre esas medidas. Decir solo que el producto "sirve para laptops" ignora el dato que determina la compra.
Ahora modifica el caso: la ficha contiene las dimensiones externas de la mochila, sin la medida del compartimento. El agente debe reconocer que falta la información necesaria. El número disponible no respalda una confirmación de que cabe.
Cuando haya un error, verifica si la fuente era accesible para el agente y si contenía la información correcta. En ChatFunnel, la base permite revisar versiones, definir los contenidos activos y elegir qué agentes usan cada material. Este control ayuda a comprobar si la prueba usó la indicación prevista.
Registra el error con el mensaje y la respuesta completos. "Se equivocó de talla" aporta poco para corregir. "Comparó el ancho de la laptop con la dimensión externa de la mochila" indica el punto que debe revisar el equipo.
Prueba la conversación por el canal que usará el cliente
Después de verificar las respuestas en un entorno de prueba, pide un acceso restringido al equipo en el canal elegido. Confirma con el proveedor cómo aislar estas conversaciones y usar datos de prueba. Evita que una simulación envíe mensajes a compradores o modifique pedidos en curso.
La prueba por el canal debe seguir toda la conversación. Envía una pregunta en dos mensajes, corrige un dato y haz una pregunta que dependa de lo anterior. Observa si el agente mantiene el contexto necesario y responde en el momento adecuado.
Verifica también la atención humana. Envía una solicitud de transferencia y sigue ambos lados: qué recibe el cliente y qué aparece para la persona que atiende. La frase "voy a transferir" debe corresponder a la transferencia configurada. Verifica el responsable, el historial disponible y si la IA deja continuar la conversación según la regla de atención definida.
La guía de Intercom para probar Fin en el chat recomienda un público interno o pequeño para verificar la experiencia completa, desde el saludo hasta la transferencia a una persona. El principio sirve para tu evaluación: probar una respuesta aislada deja parte de la atención sin revisar.
En ChatFunnel, las conversaciones pueden asignarse y transferirse a atención humana, y la ficha del contacto mantiene asociados los mensajes. Verifica estas funciones con la configuración que usará tu equipo, incluido lo que sucede fuera del horario en que alguien puede responder.
Separa las fallas que bloquean la activación de los ajustes de texto
Define los bloqueos antes de decidir que el agente está listo. Una respuesta demasiado larga puede requerir edición. Confirmar una condición que la tienda no ofrece exige corregir el caso antes de habilitar esa atención.
Como criterio inicial, trata como bloqueo cualquier falla que confirme información sin una fuente adecuada, ejecute una acción fuera del permiso o impida la transferencia exigida por el alcance. Ajusta esta regla a los riesgos de tu tienda y registra quién puede aprobar.
Usa un registro que permita seguir la corrección. El ejemplo siguiente es simulado y muestra cómo completar los campos, sin relatar una prueba ejecutada:
| Campo | Ejemplo de registro |
|---|---|
| Caso | El cliente pregunta si la laptop cabe en la mochila |
| Falla del escenario simulado | La respuesta usa la dimensión externa como si fuera interna |
| Corrección propuesta | Aclarar la diferencia en la ficha e indicar al agente que pida ayuda cuando falte la medida interna |
| Responsables | Producto verifica la ficha; la persona responsable de la configuración ajusta la instrucción |
| Criterio para cerrar | Repetir la pregunta y confirmar que la respuesta usa la medida interna o informa la falta de datos |
No marques como aprobado un caso que nadie pudo probar. Usa "pendiente" y registra el motivo, como una conexión no disponible o la ausencia de una fuente. Un porcentaje general de aciertos puede ocultar precisamente la pregunta que impide la activación.
Al comparar dos rondas, mantén el mismo conjunto de casos e informa qué cambió en la configuración. Si retiras las preguntas difíciles, la nueva ronda pierde utilidad para verificar el ajuste.
Repite las pruebas después de corregir y supervisa el inicio
Cuando el equipo corrija una falla, repite el caso afectado y algunos casos cercanos que ya funcionaban. Un cambio de instrucción puede modificar otras respuestas. Conserva el historial de las rondas para saber qué versión recibió la aprobación.
La activación inicial debe tener una persona responsable de seguir las conversaciones y un camino definido para suspender la IA si surge un problema relevante. Acuérdalo antes de recibir clientes. Guarda las preguntas nuevas que quedaron fuera de la matriz e incluye las más importantes en las próximas rondas.
Lleva la matriz, las fuentes y los escenarios de transferencia a la demostración. Usa esos casos para verificar cómo responde ChatFunnel, consulta los datos disponibles y mantiene el contexto cuando el equipo asume la conversación. Solo entonces define qué se activará en tu tienda.
