Elige un primer caso de uso de IA que puedas evaluar
Un método práctico para elegir una consulta repetitiva, preparar una muestra fija y evaluar respuestas con un relevo humano disponible.
Empieza con una pregunta repetitiva, no con un bot ambicioso
Un primer caso de uso útil suele ser una pregunta que tu equipo responde a menudo con material que ya existe. Puede ser qué incluye un plan, qué documentos llevar a una cita o dónde encontrar la política de devoluciones publicada. El mejor piloto tiene un alcance suficientemente limitado para comparar cada respuesta con una fuente, pero aparece con suficiente frecuencia para obtener una muestra significativa.
Recoge ejemplos recientes del soporte real. Elimina nombres, datos de cuentas y cualquier información innecesaria para entender la pregunta. Agrupa los casos casi idénticos, pero separa situaciones distintas. «¿Cuánto tarda la entrega?» puede parecer un único tema, aunque una región remota o un pedido con varios artículos puede necesitar otra fuente o una decisión humana.
Elige una familia de preguntas con un límite de respuesta claro. Una política pública o una guía de producto mantenida es mejor que una excepción compleja resuelta de memoria. Confirma que la fuente está actualizada, aprobada para clientes y es suficientemente concreta. Si dos documentos se contradicen, resuelve el conflicto con el responsable antes de utilizarlos.
Define qué cuenta como buen resultado
Antes de configurar nada, escribe el resultado esperado de cada pregunta. Una rúbrica práctica distingue una resolución correcta, una respuesta útil que aún necesita a alguien, una derivación innecesaria y una respuesta incorrecta o sin respaldo. Usa pocas categorías observables. «Suena útil» no es una regla fiable; «indica correctamente el plazo de devolución y no promete excepciones» sí.
Selecciona una muestra fija y mantenla durante el piloto. Incluye formulaciones habituales, paráfrasis, preguntas incompletas y un caso cuya respuesta no figure en la fuente. Añade un ejemplo que deba pasar a una persona porque exige criterio. Registra la respuesta o el punto de parada esperado antes de probar. Así no valorarás mejor una respuesta solo porque resulte fluida.
Prepara un relevo humano con personal disponible para el horario y canal del piloto. Decide quién revisa las derivaciones, qué contexto necesita y qué debe decir el asistente cuando nadie pueda intervenir inmediatamente. Es un procedimiento de tu negocio, no una garantía de tiempo de respuesta del producto. Limita cualquier compromiso a lo que el equipo puede cumplir realmente.
Configura y revisa un piloto acotado
En Resonoon puedes configurar un asistente existente desde el editor autenticado. Rol y objetivo, tono y conocimientos son aspectos separados: describe la responsabilidad prevista, aporta fuentes aprobadas y orienta cómo formular las respuestas. El editor admite archivos de conocimiento PDF y Markdown. Subir un documento no convierte una política obsoleta en una fuente autorizada; selecciona el material previamente.
Utiliza la página de pruebas con la muestra preparada. Conserva fuera del producto un registro de la pregunta exacta, respuesta, resultado esperado y puntuación del revisor. Si falla, determina si falta un hecho en la fuente, un límite en el rol o una instrucción de comportamiento más clara. Cambia una causa cada vez y repite las preguntas. De otro modo, una mejora no te dirá qué cambio ayudó.
Por ejemplo, una tienda podría probar consultas sobre el plazo ordinario de devolución. La fuente puede explicar el caso habitual, pero no los productos dañados. La prueba debe premiar precisión en el primero y una derivación cuidadosa en el segundo, sin considerar acertada una conjetura segura de sí misma. El alcance puede seguir siendo pequeño hasta que los responsables decidan cómo gestionar excepciones.
Decide si ampliar el alcance
Revisa toda la muestra, no solo las mejores conversaciones. Cuenta por separado resoluciones correctas y derivaciones adecuadas. Considera grave cualquier respuesta sin respaldo, aunque el cliente pudiera encontrar la correcta en otro sitio. Comprueba también si el relevo resulta comprensible y si el personal puede actuar con el contexto recibido.
Amplía según las pruebas y la preparación operativa. Si hubo contradicciones entre fuentes, corrígelas y repite. Si las instrucciones invitaron a inferir excepciones, explicita la condición de parada y vuelve a probar. Si el relevo no está disponible cuando hace falta, ajusta horarios o personal antes de añadir preguntas.
Un piloto es útil incluso cuando indica «todavía no». Aporta cuestiones de política pendientes y una forma repetible de evaluar revisiones posteriores. El caso de uso de atención al cliente con IA explica la aplicación general; el alcance concreto, los criterios de evaluación y la dotación de personal siguen siendo decisiones del equipo.