Misurare il ROI del Chatbot Marketing

I chatbot sono insolitamente facili da giustificare con una cattiva matematica. La piattaforma riporta migliaia di “conversazioni gestite”, il numero è grande e la fattura viene approvata. Se quelle conversazioni hanno creato valore, l’hanno distrutto o semplicemente mescolato il lavoro su una coda diversa è una domanda separata – la domanda reale sul ROI – e rispondere richiede misurazioni che la maggior parte dei dashboard dei bot non si offre volontariamente. Questo articolo imposta i quattro che contano, la baseline che li rende significativi e le trappole che rendono i report sul ROI dei chatbot falliscono gli audit.

Un chiarimento sulla portata prima dell’aritmetica: questo quadro misura i chatbot di marketing – bot il cui lavoro tocca l’acquisizione, la qualificazione o la risposta pre-vendita. I bot di supporto puri condividono alcuni meccanismi ma rispondono alla matematica a livello di servizio e mescolando i due in uno riportano fangosi entrambi. Se il tuo bot si trova a cavallo della linea, come molti fanno, dividi le sue conversazioni per intento nella fase di tagging ed esegui la sezione di marketing attraverso questo framework. La divisione prende un campo in più e salva ogni discussione successiva sul fatto che il bot sia una spesa di marketing o di supporto – è entrambe, in proporzioni misurabili.

Inizia con la linea di base o non iniziare

Ogni metrica del chatbot non ha senso senza sapere come appariva il mondo prima del bot.

Cattura l’istantanea pre-bot

Prima del lancio – o ricostruito dai record se già avviato – documento: volume delle domande in entrata per canale, tempi di risposta umani, tasso di conversione sulle superfici che il bot occuperà e supporto carico per gli argomenti che il bot coprirà. Questa istantanea è il controllo contro il quale ogni reclamo successivo viene testato. Le squadre che lo saltano finiscono per accreditare il bot per la stagionalità, la crescita del traffico e tutto ciò che si muove.

Se il bot è già attivo e non esiste alcuna istantanea, ricostruiscine uno onestamente piuttosto che saltare il passo: estrai il quarto di dati prima del lancio dai registri delle chat, dai volumi delle e-mail e dalle analisi e annota ciò che non puoi più sapere. Una linea di base parziale con lacune dichiarate disciplina ancora ogni affermazione successiva; l’alternativa – misurando contro nulla – produce il caratteristico rapporto bot gonfiato in cui ogni conversazione toccata dal bot viene conteggiata come una conversazione creata dal bot.

Definire a cosa serve il bot, in una frase

“Rispondi alle domande di prevendita al di fuori degli orari di ufficio”, “qualifica in entrata prima del routing”, “rifiuta gli argomenti di supporto ripetitivi” – scegli il lavoro effettivo. Il lavoro determina quale delle quattro misure sotto è primaria. Un bot misurato su tutti gli scopi è misurato in modo uguale contro nessuno.

Misura uno: contenimento, contato onestamente

Il contenimento – conversazioni che il bot completa senza coinvolgimento umano – è la metrica del bot principale e la più giocata.

Risoluzione separata dall’abbandono

Una conversazione che finisce perché l’utente ha ottenuto la sua risposta e quella che finisce perché l’utente ha rinunciato alla frustrazione sono entrambi “contenuti” su dashboard ingenui. Dividili: conta una conversazione contenuta come risolta solo quando mostra un segnale di completamento – l’utente ha ottenuto la cosa (risposta, link, prenotazione), ha detto grazie o confermato. Le terminazioni silenziose a metà flusso sono abbandoni e appartengono al lato dei costi del libro mastro, perché ognuno è una persona che il tuo bot ha insegnato a diffidare del tuo marchio.

Verifica un campione di trascrizione mensile

I numeri si trovano ai margini, quindi leggi trenta trascrizioni casuali di bot al mese e etichettale a mano come risolte, abbandonate o evase da umane. Il divario tra il tasso di contenimento del tuo cruscotto e quello con etichetta a mano è la correzione dell’onestà da applicare a ogni rapporto. È di routine grande.

Ruota chi fa la lettura e tieni un file condiviso delle trascrizioni peggiori insieme alle statistiche. Un unico scambio testuale in cui il bot fraintende con sicurezza un cliente tre volte fa più per calibrare le aspettative degli stakeholder di qualsiasi percentuale, e motiva le correzioni una percentuale mai lo farà. La lettura mensile è anche dove noterete la deriva anticipata – il nuovo nome del prodotto di cui il bot non ha mai sentito parlare, la domanda stagionale che fumbles – mesi prima che i numeri aggregati degradano abbastanza da allarmare chiunque.

Misura due: qualità di escalation

Il secondo lavoro di un bot di marketing è quello di migliorare le conversazioni umane, e quasi nessuno lo misura.

Confronta i fili consegnati a quelli grezzi

Quando il bot si intensifica, dovrebbe fornire un filo pre-qualificato e ricco di contesto: chi è la persona, cosa vuole, cosa è già stato detto. Misura la differenza – tempo di risoluzione e tasso di conversione dei thread preparati dai bot rispetto alle conversazioni che hanno raggiunto gli esseri umani freddi. Se i thread preparati dai bot non si chiudono più velocemente o non si convertono meglio, il bot è un portiere, non un qualificatore, e il suo caso aziendale si riduce alla copertura after-hours.

Guarda il tasso di ripetizione-domanda

L’anti-metrico: quanto spesso l’uomo deve chiedere di nuovo qualcosa che l’utente ha già detto al bot? Ogni domanda ripetuta è il valore di handoff che perde, ed è conteggiabile dallo stesso campione di trascrizione che stai già leggendo mensilmente.

Misura tre: entrate influenzate dai bot

Il contenimento e l’escalation sono efficienza; l’influenza dei ricavi è marketing.

Tag e traccia, poi finestra

Ogni conversazione bot dovrebbe essere collegata a un record di contatto in cui è nota l’identità, etichettata come tocco bot con l’argomento. Poi traccia: tasso di conversione e time-to-buy dei contatti bot-touched rispetto a quelli non toccati comparabili, all’interno di una finestra di attribuzione dichiarata. Segnalare bot-sourced (bot catturato il vantaggio) separatamente da bot-assistito (bot risposto a metà del viaggio); fondendoli è come i numeri di ROI bot vengono risi dalle recensioni finanziarie.

Accreditare la fetta after-hours in particolare

La richiesta di entrate più pulita che un bot può fare è la conversazione che è avvenuta quando non era disponibile nessun essere umano – la domanda sui prezzi serali ha risposto, la prenotazione del fine settimana è stata catturata. Segmento di conversioni influenzate dal bot per ora del giorno. La fetta fuori orario è incrementale quasi per definizione, rendendolo la singola mostra più forte dell’intero rapporto.

Trattare la copertura dell’identità come parte dell’onestà di questa misurazione. Una parte delle conversazioni bot sarà anonima – nessuna email catturata, nessun account abbinato – e queste non potranno mai apparire nel tracciamento delle entrate. Segnalare il tasso di corrispondenza accanto ai numeri di entrate (“possiamo tracciare il 40% delle conversazioni bot ai contatti; le cifre di entrate coprono solo quelle”) in modo che i lettori capiscano che la cifra è un piano, non un censimento. Stare chiaramente il pavimento è più persuasivo che presentare silenziosamente le entrate tracciate come se fosse il quadro completo, perché qualsiasi revisore competente alla fine chiederà del resto anonimo.

Misura quattro: costo pieno per interazione

Il denominatore, come al solito, nasconde i peccati.

Conta più dell’abbonamento

Il costo reale mensile del bot: le commissioni della piattaforma, più la build ammortizzata per un anno, più – la linea dimenticata – le ore di manutenzione. Qualcuno aggiorna i flussi quando i prezzi cambiano, legge le trascrizioni, riqualifica gli intenti e corregge l’integrazione dopo ogni aggiornamento della piattaforma. I bot non sono dimentico-fuoco; quelli non mantenuti decadono in macchine a risposta sbagliata, che è peggio dell’assenza.

Calcolare e confrontare il costo unitario

Dividere il costo caricato da interazioni risolte (il conteggio di contenimento onesto, non quello della dashboard) per il costo per risoluzione automatizzata. Mettilo accanto al tuo costo per conversazione gestita dall’uomo. La diffusione tra questi due numeri, moltiplicata per il volume risolto, è il contributo di efficienza del bot – il nucleo difendibile della storia ROI, a cui si aggiunge l’influenza dei ricavi dalla misurazione tre.

Le trappole che invalidano le richieste di ROI dei bot

Tre modelli di fallimento rappresentano la maggior parte dei rapporti chatbot che non sopravvivono all’esame.

La trappola della redistribuzione

Il bot “defletta” le conversazioni, ma il volume di reclami aumenta in email e social DM – utenti che sono fuggiti dal bot. Controllare i volumi degli altri canali rispetto al basale prima di rivendicare la deviazione; il lavoro che si è spostato non è un lavoro che è scomparso. Una visione unificata delle tue caselle di posta social rende questa perdita visibile invece che aneddotica.

Il punto cieco della soddisfazione

I bot possono colpire forti numeri di contenimento mentre erodono silenziosamente il calore del marchio. Abbina il sistema quantitativo con un leggero rating post-chat e monitora il suo trend. Un guadagno di contenimento acquistato con una scivolata di soddisfazione è il prestito di entrate dal prossimo trimestre.

Il sentimento nelle trascrizioni stesse è un utile supplemento gratuito qui: il campione di lettura mensile che già tira può essere valutato per marcatori di frustrazione – riformulazioni ripetute, lettere maiuscole, la parola “umano” digitata con crescente urgenza. L’aumento della densità di frustrazione è spesso visibile un mese o due prima che la tendenza di rating lo confermi, il che rende la trascrizione uno strumento di allerta precoce e un audit.

La trappola del telescopio congelato

Un bot misurato solo sul suo campo di applicazione di lancio sembra sempre meglio con l’aumentare del traffico, mentre le domande che non può gestire – nuovi prodotti, nuove obiezioni – si accumulano in escalation. Ri-esegui la domanda trimestrale: quali sono gli intenti non gestiti nelle trascrizioni e il budget di manutenzione sta espandendo il bot o semplicemente preservandolo?

Il bot report di una pagina

Mensile, su una pagina: contenimento onesto (con la correzione dell’audit dichiarata), qualità dell’escalation rispetto ai fili freddi, entrate influenzate dai bot nei suoi due gusti etichettati con la fetta after-hours evidenziata, costo caricato per interazione risolta accanto all’equivalente umano e i tre controlli della trappola. Chiudere con il singolo cambiamento i numeri del mese prossimo test. Un chatbot che sopravvive a questa pagina paga davvero per se stesso – e un chatbot che non può essere riscoperto o ritirato, che è anche il sistema di misurazione che fa il suo lavoro.