Deflexión no es resolución
La métrica estrella del mercado de chatbots IA cuenta cuántos tickets no llegan a tu equipo, no cuántos clientes quedan bien atendidos. Este informe explica por qué esa diferencia importa y qué métricas deberías exigir en su lugar.
Lo que este informe sostiene
El mercado de chatbots IA vende deflexión: el porcentaje de conversaciones que nunca llegan a un humano. Es una métrica de coste disfrazada de métrica de calidad, y comprarla sin más tiene consecuencias en clientes, marca y factura.
Es el rango que anuncia buena parte del mercado. El dato dice cuántas conversaciones no llegaron a tu equipo; no dice cuántos clientes obtuvieron una respuesta correcta ni cuántos se rindieron por el camino.
Un cliente que cierra el chat frustrado sin pedir un agente computa igual que uno perfectamente atendido: como conversación "deflectada". La métrica no distingue entre resolver y desanimar.
Un tribunal canadiense obligó a Air Canada a cumplir la política de reembolsos que su chatbot se inventó. Desde entonces, la calidad de las respuestas dejó de ser solo un problema de experiencia: es un riesgo legal.
Resolución verificada, satisfacción post-conversación, calidad del escalado, tasa de abandono y respuestas con fuente. Cinco métricas que ningún proveedor te enseña en la demo y que este informe define.
Qué mide de verdad la deflexión
La deflexión (deflection rate) mide el porcentaje de conversaciones que terminan sin intervención de un agente humano. Nació como métrica interna de coste en los help desk y el mercado de IA la adoptó como métrica principal de venta.
Una métrica de coste, no de calidad
Que un ticket no llegue a tu equipo puede significar tres cosas muy distintas: que el chatbot resolvió la duda, que el cliente abandonó frustrado, o que el cliente se fue a otro canal (un email, una llamada, una reseña pública) donde el problema ya no computa. Para la deflexión, los tres casos son idénticos: éxito.
Ese sesgo no es un accidente. La deflexión es la métrica que justifica internamente la compra ("nos ahorramos X agentes") y, a la vez, la que menos compromete al proveedor: no exige demostrar que las respuestas fueron correctas, solo que el humano no intervino. Por eso es la cifra de todas las portadas de producto.
El conflicto de interés del contador
En buena parte del mercado, quien mide la métrica es quien cobra por ella. Los modelos de precio por resolución facturan cada conversación que el sistema clasifica como "resuelta", y esa clasificación la hace el propio sistema. El proveedor define la métrica, la mide y factura según el resultado.
No hace falta suponer mala fe para ver el problema: cuando el criterio de "resuelto" lo fija quien factura por resolución, la definición tenderá a ser generosa. Cualquier auditoría seria de un chatbot empieza por preguntar quién decide qué cuenta como resuelto y cómo se puede verificar de forma independiente.
El experimento mental del interruptor
Un chatbot que respondiera "no puedo ayudarte con eso" a todas las preguntas y no ofreciera nunca el botón de hablar con un agente tendría una deflexión próxima al 100%: ningún ticket llegaría a tu equipo. Sería, según la métrica estrella del mercado, el mejor chatbot posible. Si una métrica premia apagar el soporte, no mide la calidad del soporte.
Las cinco métricas que deberías exigir
Ninguna de estas métricas sale en la demo, porque ninguna se puede medir en una demo: todas exigen conversaciones reales y revisión posterior. Esa es exactamente la razón de que importen.
1. Resolución verificada
Porcentaje de conversaciones en las que una revisión humana (por muestreo) confirma que la respuesta fue correcta y completa. Es la versión honesta de la deflexión: en lugar de contar tickets que no llegaron, cuenta clientes bien atendidos. Se mide auditando una muestra semanal de conversaciones contra la documentación real.
2. Satisfacción post-conversación
CSAT preguntado al terminar la conversación con el bot, no la encuesta genérica del helpdesk. Separa dos preguntas que el mercado mezcla: "¿te resolvió?" y "¿cómo fue la experiencia?". Un CSAT bajo con deflexión alta es la firma clásica del bot que ahuyenta en lugar de resolver.
3. Calidad del escalado
Dos caras: cuántas conversaciones que necesitaban un humano fueron escaladas a tiempo (no retener al cliente en un bucle), y cuántas escaladas eran innecesarias (no interrumpir a tu equipo con lo que el bot podía resolver). Un buen asistente acierta en ambas direcciones y transfiere con todo el contexto.
4. Tasa de abandono
Porcentaje de conversaciones que el cliente corta sin despedida, sin resolución y sin pedir agente. Es el agujero negro de la deflexión: todos estos casos computan hoy como éxito. Medirla exige registrar cómo termina cada conversación, no solo si intervino un humano.
5. Respuestas con fuente
Porcentaje de respuestas que citan el documento del que salen. Sin cita, no hay forma de distinguir si una respuesta viene de tu documentación o de la imaginación del modelo, ni de auditar errores a posteriori. Tras el precedente de Air Canada, esta métrica es también una defensa legal.
La síntesis: coste por resolución real
Lo que pagas al mes dividido entre las conversaciones con resolución verificada (métrica 1). Es el único número que permite comparar de verdad dos proveedores con modelos de precio distintos. Puedes estimarlo con tu volumen en nuestra calculadora de coste de chatbot.
¿Quieres saber cuánto te costaría un chatbot con tu volumen real?
Calculadora de coste →Por qué el mercado no mide esto
No es un descuido técnico: cada métrica ausente tiene un incentivo económico detrás. Entenderlos ayuda a negociar con cualquier proveedor, incluido nosotros.
La resolución verificada cuesta dinero al proveedor
Verificar resoluciones exige personas revisando conversaciones contra la documentación real del cliente. Es trabajo continuo que no escala con un prompt. Una plataforma self-service con miles de cuentas no puede ofrecerlo sin cambiar de modelo de negocio, así que la métrica se sustituye por la autoevaluación del propio bot.
El CSAT post-bot da miedo
Preguntar "¿te hemos resuelto?" justo después de hablar con el bot produce datos incómodos que no acompañan al argumento de venta. La encuesta se difiere, se agrega con la del equipo humano o directamente no se hace. Si un proveedor no te ofrece CSAT separado del bot, pregúntate por qué.
El abandono es invisible por diseño
Distinguir "resuelto" de "se rindió" exige clasificar el final de cada conversación, y toda conversación no clasificada engorda la cifra buena. El incentivo del proveedor es dejar la ambigüedad como está: la deflexión sube sola.
Citar fuentes expone los errores
Un bot que cita el documento del que responde permite auditar cada error: se ve qué inventó y qué malinterpretó. Un bot que no cita es incontrastable. La opacidad no es una limitación técnica (RAG con citas es estándar desde hace años): es una elección de producto.
La conclusión no es que las plataformas mientan: es que miden lo que su modelo de negocio les permite medir. Un proveedor que factura por conversación no tiene incentivo para reducir conversaciones; uno que factura por resolución no lo tiene para endurecer el criterio de resolución; y uno con tarifa plana solo retiene al cliente si el asistente funciona de verdad. Antes de comparar precios, compara incentivos.
Checklist: qué pedir antes de firmar
Siete preguntas para cualquier proveedor de chatbots IA, incluido nosotros. Las respuestas separan a quien vende deflexión de quien se compromete con la resolución.
¿Quién define "resuelto"?
Pide la definición exacta de conversación resuelta y quién la aplica. Si la clasifica el propio bot y nadie la audita, la cifra que te enseñen es una autoevaluación.
¿Puedo auditar conversaciones?
Exige acceso completo al historial de conversaciones y la posibilidad de revisarlas por muestreo con tu equipo. Sin acceso a las conversaciones no hay métrica verificable.
¿Las respuestas citan su fuente?
Cada respuesta debería enlazar el documento del que sale. Es la diferencia entre poder auditar un error y descubrirlo cuando lo sufre un cliente (o un tribunal).
¿Cómo se mide el abandono?
Pregunta qué pasa con las conversaciones que el cliente corta sin resolución. Si la respuesta es que computan como deflectadas, ya sabes cómo se ha construido el porcentaje de la portada.
¿Hay CSAT del bot, separado?
La satisfacción del bot debe medirse al terminar la conversación con el bot y reportarse separada de la del equipo humano. Agregarlas esconde exactamente lo que quieres saber.
¿Qué pasa cuando duplique volumen?
Haz los números del pricing con tu volumen actual y con el doble. Si la factura crece proporcionalmente al éxito del asistente, el modelo de precio trabaja contra ti.
¿Quién mantiene el asistente?
Las preguntas de tus clientes cambian; tu documentación, también. Pregunta quién revisa las conversaciones fallidas cada semana y ajusta el asistente: si la respuesta es "tú", el precio real incluye horas de tu equipo.
Nuestra posición en este debate no es neutral y conviene decirlo: el asistente IA de Soamee cita sus fuentes en cada respuesta, incluye revisión de conversaciones con el cliente y trabaja con tarifa acordada de antemano, precisamente porque construimos el producto sobre las respuestas que nos gustaría recibir a estas siete preguntas. Este informe explica el criterio con el que puedes evaluarnos también a nosotros.
Cómo hemos elaborado este informe
Este informe se basa en la documentación pública de las principales plataformas de chatbots y asistentes IA del mercado (páginas de producto, documentación técnica y páginas de precios publicadas), en la literatura pública sobre métricas de atención al cliente (deflection rate, CSAT, FCR) y en la resolución del tribunal civil de la Columbia Británica (Canadá) en el caso Moffatt contra Air Canada, de febrero de 2024, disponible públicamente.
Las definiciones de las cinco métricas propuestas provienen de nuestra experiencia poniendo asistentes IA en producción para clientes de distintos sectores. No incluimos datos de ningún cliente concreto ni cifras internas de ningún proyecto: los ejemplos numéricos del informe son ilustrativos.
Este informe se publica con fines informativos. Soamee desarrolla y comercializa un asistente IA propio, y por tanto tiene una posición en el mercado que aquí se analiza; hemos procurado que cada afirmación sea verificable de forma independiente y señalamos nuestra posición donde es relevante. Si detectas algún error, escríbenos a info@soamee.com y lo corregimos.
Pruébanos con las siete preguntas
Tráenos tu documentación real y te enseñamos el asistente respondiendo a las preguntas que de verdad hacen tus clientes, con sus fuentes citadas. Sin compromiso.
Cuéntanos tu reto. Te proponemos solución.
Sin compromiso. En menos de 24 h recibes una propuesta con alcance, plazos y presupuesto. Sin letra pequeña.