Testing de asistentes inteligentes y chatbots corporativos

Un chatbot corporativo no falla como una aplicación normal. No lanza excepciones: responde con seguridad cosas incorrectas, se sale del guion ante preguntas inesperadas, pierde el hilo en la tercera réplica o promete a un cliente algo que la empresa no ofrece. Y suele descubrirse en producción, delante de usuarios reales, porque nadie definió cómo se prueba un sistema que conversa.

Este curso traslada la disciplina de QA al terreno conversacional. Aprenderás a derivar casos de prueba desde los flujos y políticas del asistente, a cubrir lo que de verdad rompe un chatbot — ambigüedad, cambios de tema, usuarios hostiles, conversaciones largas — y a validar tono, alcance y cumplimiento de las reglas de negocio, no solo la corrección de las respuestas.

La parte de automatización convierte ese plan en suites ejecutables: aserciones sobre respuestas, conversaciones multi-turno simuladas y baterías de regresión con herramientas como promptfoo que se lanzan en cada cambio de prompt o de modelo. Verás también qué no se puede automatizar y cómo organizar las rondas de revisión humana y UAT con usuarios piloto.

El enfoque es funcional y de producto: probar el asistente como sistema que atiende a personas, con criterios de salida claros antes del despliegue. La evaluación con datasets y métricas de las tripas del sistema (RAG, LLM) se cubre en los cursos de evaluación; este pone el foco en el QA de la experiencia conversacional completa.