Medindo o ROI do Chatbot Marketing

Chatbots são extraordinariamente fáceis de justificar com matemática ruim. A plataforma relata milhares de “conversas tratadas”, o número é grande e a fatura é aprovada. Se essas conversas criaram valor, destruíram ou simplesmente embaralharam o trabalho em uma fila diferente é uma questão separada. — a questão real do ROI — e a resposta requer medições a maioria dos dashboards bot não são voluntários. Este artigo define os quatro que importam, a linha de base que os torna significativos e as armadilhas que fazem os relatórios de ROI do chatbot falharem nas auditorias.

Um esclarecimento sobre o escopo antes da aritmética: este quadro mede chatbots de marketing — bots cujo trabalho toca aquisição, qualificação ou pré-venda. Os bots de suporte puro compartilham algumas mecânicas, mas respondem à matemática de nível de serviço e misturam os dois em um relatório. Se o seu bot se enlaça na linha, como muitos fazem, divida suas conversas por intenção no estágio de marcação e execute a fatia de marketing através deste framework. A divisão leva um campo extra e salva todos os argumentos posteriores sobre se o bot é uma despesa de marketing ou um suporte. — É ambos, em proporções mensuráveis.

Comece com a linha de base ou não comece

Cada métrica de chatbot não tem sentido sem saber como o mundo era antes do bot.

Capture o instantâneo pré-bot

Antes do lançamento — ou reconstruído a partir de registros se você já lançou — documento: volume de perguntas de entrada por canal, tempos de resposta humana, taxa de conversão nas superfícies que o bot ocupará e carga de suporte para os tópicos que o bot cobrirá. Este instantâneo é o controle contra o qual cada reivindicação posterior é testada. As equipes que a ignoram acabam creditando ao bot a sazonalidade, o crescimento do tráfego e tudo o mais que se moveu.

Se o bot já estiver ao vivo e não existir instantâneo, reconstrua honestamente em vez de pular o passo: puxe o quarto dos dados antes do lançamento de seus registros de bate-papo, volumes de e-mail e análises e anote o que você não pode mais saber. Uma linha de base parcial com lacunas declaradas ainda disciplina cada reivindicação posterior; a alternativa — Medindo contra nada — produz o relatório de bot inflado característico em que cada conversa que o bot tocou é contada como uma conversa que o bot criou.

Definir para que serve o bot, em uma frase

“Responder a perguntas pré-venda fora do horário de expediente”, “qualificar a entrada antes do roteamento”, “defletar tópicos de suporte repetitivo” — Escolha o trabalho real. O trabalho determina qual das quatro medidas abaixo é primária. Um bot medido em todos os propósitos é igualmente medido em nenhum.

Medição 1: contenção, contada honestamente

Contenção — conversas que o bot completa sem envolvimento humano — é a métrica bot principal, e a mais disputada.

Resolução separada do abandono

Uma conversa que termina porque o usuário obteve a resposta e uma que termina porque o usuário desistiu em frustração são ambos “contidos” em dashboards ingênuos. Dividi-los: conte uma conversa contida como resolvida apenas quando ela mostra um sinal de conclusão — o usuário conseguiu a coisa (resposta, link, reserva), disse obrigado, ou confirmou. Terminações silenciosas no meio do fluxo são abandonos e pertencem ao lado do custo do livro, porque cada um é uma pessoa que seu bot ensinou a desconfiar de sua marca.

Auditar uma amostra de transcrição mensal

Os números estão nas margens, então leia trinta transcrições aleatórias de bots por mês e marque-as manualmente resolvidas, abandonadas ou escapadas para humanos. A diferença entre a taxa de contenção do seu painel e a sua taxa de retenção marcada à mão é a correção de honestidade a ser aplicada a cada relatório. É rotineiramente grande.

Gire quem faz a leitura e mantenha um arquivo compartilhado das piores transcrições ao lado das estatísticas. Uma única troca de verbos na qual o bot não compreende um cliente com confiança três vezes faz mais para calibrar as expectativas das partes interessadas do que qualquer porcentagem, e motiva as correções que uma porcentagem nunca fará. A leitura mensal é também onde você notará a deriva cedo — o novo nome do produto do bot nunca ouviu falar, a questão sazonal que ele vacila — meses antes que os números agregados se degradam o suficiente para alarmar alguém.

Medição dois: qualidade de escalada

O segundo trabalho de um bot de marketing é melhorar as conversas humanas, e quase ninguém mede isso.

Compare handde-off threads para os crus

Quando o bot aumenta, ele deve entregar a um humano um fio pré-qualificado, rico em contexto: quem é a pessoa, o que eles querem, o que já foi dito. Meça a diferença — tempo e taxa de conversão de bot-preparado threads Conversas que atingiram os seres humanos frios. Se preparado por bot threads não fecha mais rápido ou converte melhor, o bot é um porteiro, não um qualificador, e seu caso de negócios encolhe para cobertura pós-hora.

Veja a taxa de repetição-pergunta

O anti-métrico: com que frequência o ser humano tem que re-pedir algo que o usuário já disse ao bot? Cada pergunta repetida é um valor de entrega vazando, e é contabilizável a partir da mesma amostra de transcrição que você já está lendo mensalmente.

3 – receita influenciada por bot

Contenção e escalada são eficiência; influência de receita é marketing.

Tag e trace, então janela

Toda conversa bot deve ser anexada a um registro de contato onde a identidade é conhecida, marcada como bot-tocado com o tópico. Em seguida, trace: taxa de conversão e tempo de compra de contatos com bots tocados versus os intocados comparáveis, dentro de uma janela de atribuição declarada. Relatório de bot-sourced (bot capturado o chumbo) separadamente do bot-assisted (bot respondido no meio da jornada); misturando-os é como os números de ROI do bot são ridicularizados das revisões financeiras.

Crédito a fatia pós-horas especificamente

A mais limpa reivindicação de receita que um bot pode fazer é a conversa que aconteceu quando nenhum humano estava disponível — a pergunta de preços da noite respondida, a reserva de fim de semana capturada. Segmento de conversões influenciadas por bot por hora do dia. A fatia fora de horas é incremental quase por definição, tornando-se a exposição única mais forte em todo o relatório.

Trate a cobertura de identidade como parte da honestidade desta medida. Uma parte das conversas de bots será anônima — Nenhum e-mail capturado, nenhuma conta correspondente — e estes nunca podem aparecer no rastreamento de receita. Relate a taxa de correspondência ao lado dos números de receita (“podemos rastrear 40% das conversas de bots para contatos; os números de receita cobrem apenas aqueles”) para que os leitores entendam que o número é um piso, não um censo. Afirmar o chão claramente é mais persuasivo do que apresentar silenciosamente receitas rastreadas como se fosse o quadro inteiro, porque qualquer revisor competente acabará por perguntar sobre o restante anônimo.

quatro: custo totalmente carregado por interação

O denominador, como de costume, esconde os pecados.

Contar mais do que a assinatura

O custo mensal real do bot: taxas de plataforma, mais a construção amortizada ao longo de um ano, além de — A Linha Esquecida — horas de manutenção. Alguém atualiza os fluxos quando os preços mudam, lê transcrições, retreina intenções e corrige a integração após cada atualização da plataforma. Os bots não são fogo e esquecimento; os não-mantidos decaem em máquinas de resposta errada, o que é pior do que a ausência.

Calcular e comparar o custo unitário

Divida o custo carregado por interações resolvidas (sua contagem de contenção honesta, não do painel) pelo custo por resolução automatizada. Coloque-o ao lado do seu custo por conversa com humanos. A diferença entre esses dois números, multiplicada pelo volume resolvido, é a contribuição de eficiência do bot. — O núcleo defensável da história do ROI, ao qual a influência da receita da medição três é adicionada.

As armadilhas que invalidam o ROI do bot

Três padrões de falha são responsáveis pela maioria dos relatórios de chatbot que não sobrevivem ao escrutínio.

The redistribution trap

O bot “deflet” conversas, mas o volume de reclamações aumenta em e-mail e DMs sociais — usuários que fugiram do bot. Verifique os volumes dos outros canais contra a linha de base antes de reivindicar a deflexão; o trabalho que se moveu não é trabalho que desapareceu. Uma visão unificada de suas caixas de entrada sociais torna esse vazamento visível em vez de anedótico.

O ponto cego da satisfação

Os bots podem atingir números de contenção fortes enquanto corroem silenciosamente o calor da marca. Emparelhe o sistema quantitativo com uma classificação pós-chat leve e acompanhe sua tendência. Um ganho de contenção comprado com um slide de satisfação é a receita de empréstimo do próximo trimestre.

Sentimento nas próprias transcrições é um suplemento gratuito útil aqui: a amostra de leitura mensal que você já puxa pode ser marcada para marcadores de frustração — repetidas refrases, letras maiúsculas, a palavra “humano” digitada com urgência crescente. A crescente densidade de frustração é muitas vezes visível um mês ou dois antes que a tendência de classificação confirme, o que faz com que a transcrição leia um instrumento de alerta antecipado, bem como uma auditoria.

The frozen-scope trap

Um bot medido apenas em seu escopo de lançamento parece cada vez melhor à medida que o tráfego cresce, enquanto as perguntas que ele não pode lidar — novos produtos, novas objeções — pilha em escalações. Re-execute a questão de escopo trimestralmente: quais são as principais intenções não manipuladas nas transcrições, e o orçamento de manutenção está expandindo o bot ou apenas preservando-o?

O relatório bot de uma página

Mensal, em uma página: contenção honesta (com a correção de auditoria declarada), qualidade de escalada versus frio threads, receita influenciada por bots em seus dois sabores rotulados com a fatia após horas destacada, custo carregado por interação resolvida ao lado do equivalente humano e as três verificações de armadilha. Fechar com a única mudança que os números do próximo mês testarão. Um chatbot que sobrevive a esta página paga por si — Um chatbot que não pode ser remarcado ou aposentado, que também é o sistema de medição que faz seu trabalho.