Deflessione non è risoluzione
La metrica di punta del mercato dei chatbot IA conta quanti ticket non arrivano al tuo team, non quanti clienti restano ben serviti. Questo report spiega perché quella differenza conta e quali metriche dovresti esigere al suo posto.
La tesi di questo report
Il mercato dei chatbot IA vende deflessione (deflection): la percentuale di conversazioni che non arrivano mai a un umano. È una metrica di costo travestita da metrica di qualità, e comprarla a scatola chiusa ha conseguenze su clienti, brand e fattura.
È il range che annuncia buona parte del mercato. Il dato dice quante conversazioni non sono arrivate al tuo team; non dice quanti clienti hanno ottenuto una risposta corretta né quanti si sono arresi lungo il percorso.
Un cliente che chiude la chat frustrato senza chiedere un agente vale quanto uno servito alla perfezione: come conversazione "deflessa". La metrica non distingue tra risolvere e scoraggiare.
Un tribunale canadese ha obbligato Air Canada a rispettare la politica di rimborsi che il suo chatbot si era inventata. Da allora, la qualità delle risposte non è più solo un problema di esperienza: è un rischio legale.
Risoluzione verificata, soddisfazione post-conversazione, qualità dell’escalation, tasso di abbandono e risposte con fonte. Cinque metriche che nessun fornitore ti mostra nella demo e che questo report definisce.
Cosa misura davvero la deflessione
La deflessione (deflection rate) misura la percentuale di conversazioni che terminano senza l’intervento di un agente umano. È nata come metrica interna di costo negli help desk e il mercato dell’IA l’ha adottata come metrica di vendita principale.
Una metrica di costo, non di qualità
Che un ticket non arrivi al tuo team può significare tre cose molto diverse: che il chatbot ha risolto il dubbio, che il cliente ha abbandonato frustrato, o che il cliente è passato a un altro canale (un’email, una telefonata, una recensione pubblica) dove il problema non viene più conteggiato. Per la deflessione, i tre casi sono identici: successo.
Quel bias non è un incidente. La deflessione è la metrica che giustifica internamente l’acquisto ("risparmiamo X agenti") e, allo stesso tempo, quella che impegna meno il fornitore: non richiede di dimostrare che le risposte fossero corrette, solo che l’umano non è intervenuto. Per questo è la cifra di tutte le copertine di prodotto.
Il conflitto di interessi di chi conta
In buona parte del mercato, chi misura la metrica è chi la fattura. I modelli di prezzo a risoluzione fatturano ogni conversazione che il sistema classifica come "risolta", e quella classificazione la fa il sistema stesso. Il fornitore definisce la metrica, la misura e fattura in base al risultato.
Non serve presumere malafede per vedere il problema: quando il criterio di "risolto" lo fissa chi fattura a risoluzione, la definizione tenderà a essere generosa. Qualsiasi audit serio di un chatbot comincia chiedendo chi decide cosa conta come risolto e come lo si può verificare in modo indipendente.
L’esperimento mentale dell’interruttore
Un chatbot che rispondesse "non posso aiutarti con questo" a tutte le domande e non offrisse mai il pulsante per parlare con un agente avrebbe una deflessione vicina al 100%: nessun ticket arriverebbe al tuo team. Sarebbe, secondo la metrica di punta del mercato, il miglior chatbot possibile. Se una metrica premia lo spegnere il supporto, non misura la qualità del supporto.
Le cinque metriche che dovresti esigere
Nessuna di queste metriche compare nella demo, perché nessuna si può misurare in una demo: tutte richiedono conversazioni reali e revisione successiva. Ed è esattamente il motivo per cui contano.
1. Risoluzione verificata
Percentuale di conversazioni in cui una revisione umana (a campione) conferma che la risposta era corretta e completa. È la versione onesta della deflessione: invece di contare i ticket che non sono arrivati, conta i clienti ben serviti. Si misura verificando un campione settimanale di conversazioni contro la documentazione reale.
2. Soddisfazione post-conversazione
CSAT chiesto alla fine della conversazione con il bot, non il sondaggio generico dell’helpdesk. Separa due domande che il mercato mescola: "ti ha risolto il problema?" e "com’è stata l’esperienza?". Un CSAT basso con deflessione alta è la firma classica del bot che allontana invece di risolvere.
3. Qualità dell’escalation
Due facce: quante conversazioni che richiedevano un umano sono state escalate in tempo (non trattenere il cliente in un loop), e quante escalation erano superflue (non interrompere il tuo team con ciò che il bot poteva risolvere). Un buon assistente azzecca in entrambe le direzioni e trasferisce con tutto il contesto.
4. Tasso di abbandono
Percentuale di conversazioni che il cliente interrompe senza congedo, senza risoluzione e senza chiedere un agente. È il buco nero della deflessione: tutti questi casi oggi vengono conteggiati come successo. Misurarlo richiede registrare come finisce ogni conversazione, non solo se è intervenuto un umano.
5. Risposte con fonte
Percentuale di risposte che citano il documento da cui provengono. Senza citazione, non c’è modo di distinguere se una risposta viene dalla tua documentazione o dall’immaginazione del modello, né di verificare gli errori a posteriori. Dopo il precedente Air Canada, questa metrica è anche una difesa legale.
La sintesi: costo per risoluzione reale
Quello che paghi al mese diviso per le conversazioni con risoluzione verificata (metrica 1). È l’unico numero che permette di confrontare davvero due fornitori con modelli di prezzo diversi. Puoi stimarlo con il tuo volume nel nostro calcolatore del costo di un chatbot.
Vuoi sapere quanto ti costerebbe un chatbot con il tuo volume reale?
Calcolatore del costo →Perché il mercato non misura tutto questo
Non è una svista tecnica: dietro ogni metrica assente c’è un incentivo economico. Capirli aiuta a negoziare con qualsiasi fornitore, noi compresi.
La risoluzione verificata costa denaro al fornitore
Verificare le risoluzioni richiede persone che rivedono le conversazioni contro la documentazione reale del cliente. È lavoro continuo che non scala con un prompt. Una piattaforma self-service con migliaia di account non può offrirlo senza cambiare modello di business, quindi la metrica viene sostituita dall’autovalutazione del bot stesso.
Il CSAT post-bot fa paura
Chiedere "abbiamo risolto il tuo problema?" subito dopo la conversazione con il bot produce dati scomodi che non accompagnano l’argomento di vendita. Il sondaggio viene rimandato, aggregato con quello del team umano o direttamente non fatto. Se un fornitore non ti offre un CSAT separato per il bot, chiediti perché.
L’abbandono è invisibile per design
Distinguere "risolto" da "si è arreso" richiede di classificare la fine di ogni conversazione, e ogni conversazione non classificata gonfia la cifra buona. L’incentivo del fornitore è lasciare l’ambiguità com’è: la deflessione sale da sola.
Citare le fonti espone gli errori
Un bot che cita il documento da cui risponde permette di verificare ogni errore: si vede cosa ha inventato e cosa ha frainteso. Un bot che non cita è incontrollabile. L’opacità non è un limite tecnico (il RAG con citazioni è uno standard da anni): è una scelta di prodotto.
La conclusione non è che le piattaforme mentano: è che misurano ciò che il loro modello di business permette loro di misurare. Un fornitore che fattura a conversazione non ha incentivi a ridurre le conversazioni; uno che fattura a risoluzione non ne ha a irrigidire il criterio di risoluzione; e uno a tariffa fissa trattiene il cliente solo se l’assistente funziona davvero. Prima di confrontare i prezzi, confronta gli incentivi.
Checklist: cosa chiedere prima di firmare
Sette domande per qualsiasi fornitore di chatbot IA, noi compresi. Le risposte separano chi vende deflessione da chi si impegna sulla risoluzione.
Chi definisce "risolto"?
Chiedi la definizione esatta di conversazione risolta e chi la applica. Se la classifica il bot stesso e nessuno la verifica, la cifra che ti mostrano è un’autovalutazione.
Posso verificare le conversazioni?
Esigi l’accesso completo allo storico delle conversazioni e la possibilità di rivederle a campione con il tuo team. Senza accesso alle conversazioni non c’è metrica verificabile.
Le risposte citano la fonte?
Ogni risposta dovrebbe linkare il documento da cui proviene. È la differenza tra poter verificare un errore e scoprirlo quando lo subisce un cliente (o un tribunale).
Come si misura l’abbandono?
Chiedi cosa succede alle conversazioni che il cliente interrompe senza risoluzione. Se la risposta è che contano come deflesse, sai già come è stata costruita la percentuale in copertina.
C’è un CSAT del bot, separato?
La soddisfazione del bot va misurata alla fine della conversazione con il bot e riportata separatamente da quella del team umano. Aggregarle nasconde esattamente ciò che vuoi sapere.
Cosa succede quando raddoppio il volume?
Fai i conti del pricing con il tuo volume attuale e con il doppio. Se la fattura cresce in proporzione al successo dell’assistente, il modello di prezzo lavora contro di te.
Chi mantiene l’assistente?
Le domande dei tuoi clienti cambiano; la tua documentazione, anche. Chiedi chi rivede le conversazioni fallite ogni settimana e mette a punto l’assistente: se la risposta è "tu", il prezzo reale include ore del tuo team.
La nostra posizione in questo dibattito non è neutrale ed è giusto dirlo: l’assistente IA di Soamee cita le sue fonti in ogni risposta, include la revisione delle conversazioni con il cliente e lavora con una tariffa concordata in anticipo, proprio perché abbiamo costruito il prodotto sulle risposte che vorremmo ricevere a queste sette domande. Questo report spiega il criterio con cui puoi valutare anche noi.
Come abbiamo elaborato questo report
Questo report si basa sulla documentazione pubblica delle principali piattaforme di chatbot e assistenti IA del mercato (pagine di prodotto, documentazione tecnica e pagine di prezzi pubblicate), sulla letteratura pubblica sulle metriche di assistenza clienti (deflection rate, CSAT, FCR) e sulla decisione del tribunale civile della Columbia Britannica (Canada) nel caso Moffatt contro Air Canada, del febbraio 2024, disponibile pubblicamente.
Le definizioni delle cinque metriche proposte provengono dalla nostra esperienza nel portare assistenti IA in produzione per clienti di settori diversi. Non includiamo dati di alcun cliente specifico né cifre interne di alcun progetto: gli esempi numerici del report sono illustrativi.
Questo report è pubblicato a scopo informativo. Soamee sviluppa e commercializza un proprio assistente IA, e ha quindi una posizione nel mercato qui analizzato; ci siamo impegnati affinché ogni affermazione sia verificabile in modo indipendente e segnaliamo la nostra posizione dove è rilevante. Se trovi un errore, scrivici a info@soamee.com e lo correggiamo.
Mettici alla prova con le sette domande
Portaci la tua documentazione reale e ti mostriamo l’assistente che risponde alle domande che fanno davvero i tuoi clienti, con le fonti citate. Senza impegno.
Raccontaci la tua sfida. Ti proponiamo la soluzione.
Senza impegno. In meno di 24 ore riceverai una proposta con ambito, tempistiche e budget. Nessuna clausola nascosta.