Medir el ROI del marketing de chatbots

Los chatbots son inusualmente fáciles de justificar con malas matemáticas. La plataforma informa de miles de “conversaciones manejadas”, el número es grande y la factura es aprobada. Ya sea que esas conversaciones hayan creado valor, las hayan destruido o simplemente hayan barajado el trabajo en una cola diferente, es una pregunta separada, la pregunta real del ROI, y responderla requiere mediciones que la mayoría de los paneles de control de bots no ofrecen. Este artículo establece los cuatro que importan, la línea de base que los hace significativos y las trampas que hacen que los informes de ROI de los chatbots fallen en las auditorías.

Una aclaración sobre el alcance antes de la aritmética: este marco mide los chatbots de marketing: bots cuyo trabajo toca la adquisición, la calificación o la respuesta previa a la venta. Los bots de soporte puro comparten algunas mecánicas, pero responden a las matemáticas de nivel de servicio, y mezclar los dos en un informe enturbia a ambos. Si tu bot se encuentra en la línea, como muchos lo hacen, divide sus conversaciones por intención en la etapa de etiquetado y ejecuta el segmento de marketing a través de este marco. La división toma un campo adicional y guarda cada argumento posterior sobre si el bot es un gasto de marketing o uno de soporte, es ambos, en proporciones medibles.

Comience con la línea de base o no comience

Cada métrica de chatbot no tiene sentido sin saber cómo era el mundo antes del bot.

Capturar la instantánea previa al robot

Antes del lanzamiento, o reconstruído a partir de registros si ya lo has lanzado, documenta: volumen de preguntas entrantes por canal, tiempos de respuesta humanos, tasa de conversión en las superficies que ocupará el bot y carga de soporte para los temas que cubrirá el bot. Esta instantánea es el control contra el cual se prueba cada reclamación posterior. Los equipos que se saltan terminan atribuyendo al bot la estacionalidad, el crecimiento del tráfico y todo lo demás que se movió.

Si el bot ya está activo y no existe ninguna instantánea, reconstruye uno honestamente en lugar de saltarte el paso: extrae la cuarta parte de los datos antes del lanzamiento de tus registros de chat, volúmenes de correo electrónico y análisis, y escribe lo que ya no puedes saber. Una línea de base parcial con brechas declaradas todavía disciplina cada afirmación posterior; la alternativa, medir contra nada, produce el informe de bot inflado característico en el que cada conversación que el bot tocó se cuenta como una conversación que el bot creó.

Define para qué sirve el bot, en una frase

“Responder preguntas de preventa fuera del horario de oficina”, “calificar la entrada antes de la ruta”, “desviar temas de soporte repetitivos” – elegir el trabajo real. El trabajo determina cuál de las cuatro mediciones siguientes es primaria. Un bot medido contra todos los propósitos por igual se mide contra ninguno.

Medida uno: contención, contado honestamente

La contención, conversaciones que el bot completa sin participación humana, es la métrica principal del bot y la más jugada.

Resolución separada del abandono

Una conversación que termina porque el usuario obtuvo su respuesta y una que termina porque el usuario se dio por vencido en la frustración están ambos “contenidos” en tableros de control ingenuos. Dividirlos: contar una conversación contenida como resuelta solo cuando muestra una señal de finalización: el usuario recibió la cosa (respuesta, enlace, reserva), dijo gracias o confirmó. Los finales silenciosos a mitad de flujo son abandonos y pertenecen al lado del costo del libro mayor, porque cada uno es una persona a la que su bot le enseñó a desconfiar de su marca.

Auditar una muestra de transcripción mensualmente

Los números se encuentran en los márgenes, así que lee treinta transcripciones aleatorias de bots al mes y etiquetándolas a mano resueltas, abandonadas o escapadas a humanos. La brecha entre la tasa de contención de su tablero y su mano etiquetada es la corrección de honestidad que se aplica a cada informe. Es rutinariamente grande.

Rota quién hace la lectura y mantén un archivo compartido de las peores transcripciones junto con las estadísticas. Un solo intercambio literal en el que el bot malinterpreta con confianza a un cliente tres veces hace más para calibrar las expectativas de las partes interesadas que cualquier porcentaje, y motiva las correcciones que un porcentaje nunca hará. La lectura mensual es también donde notará la deriva temprana: el nuevo nombre del producto del que el bot nunca ha oído hablar, la pregunta estacional que falla, meses antes de que los números agregados se degraden lo suficiente como para alarmar a nadie.

Medición dos: calidad de escalada

El segundo trabajo de un bot de marketing es mejorar las conversaciones humanas, y casi nadie lo mide.

Comparar hilos entregados con los crudos

Cuando el bot se intensifica, debería entregar a un humano un hilo precalificado y rico en contexto: quién es la persona, qué quiere, qué ya se dijo. Mide la diferencia: el tiempo de resolución y la tasa de conversión de los hilos preparados por los robots frente a las conversaciones que llegaron a los humanos en frío. Si los hilos preparados por un bot no se cierran más rápido o se convierten mejor, el bot es un portero, no un calificador, y su caso de negocio se reduce a la cobertura fuera de horas.

Vea la tasa de preguntas repetidas

La antimétrica: ¿con qué frecuencia el humano tiene que volver a preguntar algo que el usuario ya le dijo al bot? Cada pregunta repetida es un valor de traspaso que se filtra, y se puede contar de la misma muestra de transcripción que ya está leyendo mensualmente.

Medición tres: ingresos influenciados por bots

La contención y la escalada son eficiencia; la influencia de los ingresos es marketing.

Etiquetar y rastrear, luego ventana

Cada conversación bot debe adjuntarse a un registro de contacto donde se conoce la identidad, etiquetado como bot-tocado con el tema. Luego traza: tasa de conversión y tiempo de compra de contactos tocados por bot frente a otros no tocados comparables, dentro de una ventana de atribución declarada. Informe bot-sourced (bot capturado el plomo) por separado de bot-asistido (bot respondió a mitad de camino); mezclarlos es cómo los números de ROI de bot se ríen de las revisiones financieras.

Crédito de la rebanada después de horas específicamente

La afirmación de ingresos más limpia que un bot puede hacer es la conversación que ocurrió cuando no había humanos disponibles: la pregunta de precios de la noche respondida, la reserva de fin de semana capturada. Segmenta las conversiones influenciadas por bots según la hora del día. La porción fuera de horas es incremental casi por definición, por lo que es la exposición individual más fuerte en todo el informe.

Tratar la cobertura de identidad como parte de la honestidad de esta medición. Una parte de las conversaciones de bot será anónima, no se capturará ningún correo electrónico, no se emparejará ninguna cuenta, y esas nunca podrán aparecer en el seguimiento de ingresos. Reportar la tasa de coincidencias junto con los números de ingresos (“podemos rastrear el cuarenta por ciento de las conversaciones de bots a los contactos; las cifras de ingresos cubren solo esos”) para que los lectores entiendan que la cifra es un piso, no un censo. Decir el piso claramente es más persuasivo que presentar silenciosamente los ingresos rastreados como si fuera todo el cuadro, porque cualquier revisor competente eventualmente preguntará sobre el resto anónimo.

Medición cuatro: costo por interacción completamente cargado

El denominador, como de costumbre, oculta los pecados.

Cuenta más que la suscripción

El costo mensual real del bot: tarifas de la plataforma, más la construcción amortizada durante un año, más – la línea olvidada – horas de mantenimiento. Alguien actualiza los flujos cuando los precios cambian, lee transcripciones, vuelve a entrenar las intenciones y corrige la integración después de cada actualización de la plataforma. Los bots no son fuego y olvido; los no mantenidos se descomponen en máquinas de respuesta incorrecta, lo cual es peor que la ausencia.

Calcular y comparar el costo unitario

Divida el costo cargado por las interacciones resueltas (su recuento honesto de contención, no el del tablero) por el costo por resolución automatizada. Ponlo al lado de tu costo por conversación manejada por humanos. El diferencial entre esos dos números, multiplicado por el volumen resuelto, es la contribución de eficiencia del bot: el núcleo defendible de la historia del ROI, al que se agrega la influencia de los ingresos de la medición tres.

Las trampas que invalidan las reclamaciones de ROI de los bots

Tres patrones de falla representan la mayoría de los informes de chatbots que no sobreviven al escrutinio.

La trampa de redistribución

El bot “desvía” las conversaciones, pero el volumen de quejas aumenta en los mensajes de correo electrónico y los DM sociales, usuarios que huyeron del bot. Compruebe los volúmenes de los otros canales contra la línea base antes de reclamar la desviación; el trabajo que se movió no es trabajo que desapareció. Una vista unificada de sus bandejas de entrada sociales hace que esta fuga sea visible en lugar de anecdótica.

El punto ciego de satisfacción

Los bots pueden alcanzar números de contención fuertes mientras erosionan silenciosamente el calor de la marca. Combina el sistema cuantitativo con una clasificación post-chat ligera y sigue su tendencia. Una ganancia de contención comprada con una caída de satisfacción está tomando prestados los ingresos del próximo trimestre.

Sentimiento en las transcripciones en sí es un suplemento gratuito útil aquí: la muestra de lectura mensual que ya se puede calificar para los marcadores de frustración – reformulaciones repetidas, letras mayúsculas, la palabra “humano” mecanografiado con creciente urgencia. El aumento de la densidad de frustración es a menudo visible un mes o dos antes de que la tendencia de calificación lo confirme, lo que hace que la transcripción lea un instrumento de alerta temprana, así como una auditoría.

La trampa del frozen-scope

Un bot medido solo en su alcance de lanzamiento se ve cada vez mejor a medida que crece el tráfico, mientras que las preguntas que no puede manejar – nuevos productos, nuevas objeciones – se acumulan en escaladas. Vuelva a ejecutar la pregunta de alcance trimestralmente: ¿cuáles son las principales intenciones no manejadas en las transcripciones, y el presupuesto de mantenimiento está expandiendo el bot o simplemente preservándolo?

El informe de bot de una página

Mensualmente, en una página: contención honesta (con la corrección de auditoría indicada), calidad de escalada frente a hilos fríos, ingresos influenciados por bot en sus dos sabores etiquetados con el segmento fuera de horas resaltado, costo cargado por interacción resuelta junto al equivalente humano y las tres comprobaciones de trampa. Cerrar con el cambio único de los números del mes próximo va a probar. Un chatbot que sobrevive a esta página realmente se paga por sí mismo, y un chatbot que no puede volver a explorarse o retirarse, que también es el sistema de medición que hace su trabajo.