Segui la decisione di retention dall'analisi economica alle evidenze
Queste sei acquisizioni native mostrano un confronto sintetico di retention, le decisioni sui singoli abbonati e i controlli sul copy redatto. Northwind presenta 6,000 intenti di cancellazione mensili correnti e 9,000 osservazioni storiche randomizzate: 4,460 trattate e 4,540 di controllo. La sua coda di revisione di 32 casi è una selezione rappresentativa per l'ispezione, non un campione casuale della coorte. Ciascuno screenshot si apre a dimensione intera.
Confrontare le policy a parità di budget di contatto
Save everyone contatta tutti i 6,000 intenti di cancellazione e genera un valore incrementale negativo in questo scenario di test. Il targeting predittivo del churn e il causal uplift contattano ciascuno 2,239 abbonati, ma li selezionano per motivi diversi: uno ordina in base alla probabilità di abbandono, mentre l'altro ordina in base al valore stimato dell'intervento al netto del costo dello sconto. L'uguaglianza del budget isola questa distinzione di targeting.
| Policy | Ricavi incrementali annuali | Abbonati contattati |
|---|---|---|
| Save everyone | -$424,757 | 6,000 |
| Predictive churn targeting | +$144,162 | 2,239 |
| Causal uplift | +$187,956 | 2,239 |
| Perfect-information oracle | +$309,480 | 2,393 |
L'uplift supera il targeting del churn di $43,794 all'anno in questa valutazione sintetica delle policy. I valori sono calcolati rispetto a esiti potenziali sintetici nascosti e annualizzati moltiplicando i ricavi mensili per 12. Non costituiscono risparmi effettivi per i clienti né previsioni per il sistema di instradamento operativo completo. L'oracolo ha visibilità su esiti nascosti inaccessibili a un modello distribuito, fornendo quindi un limite teorico a informazione perfetta anziché una policy implementabile.
La curva di ranking aggiunge una verifica separata su 2,700 osservazioni sintetiche randomizzate held-out. AUUC indica l'area sotto la curva di uplift: i valori visualizzati sono 78.8 per l'uplift, circa 42.3 per il churn predittivo e circa 4.2 per il ranking casuale. Non sono percentuali di accuratezza. L'uplift contatta comunque cinque dei 673 abbonati danneggiati dall'intervento nella ground truth sintetica, lasciandone 668 non contattati; un ranking migliore non garantisce una protezione perfetta.
Spiegare perché un abbonato non dovrebbe ricevere alcun contatto di retention
Per un abbonato sintetico di Northwind, il modello stima l'87.1% di retention senza intervento e il 28.2% con l'intervento. La differenza è di -58.9 punti percentuali. L'etichetta Sleeping Dog indica che si stima che l'intervento danneggi la retention; l'instradamento del singolo abbonato seleziona quindi Do Not Contact e salta l'agente di salvataggio.
La regola di instradamento etichetta gli effetti stimati del trattamento inferiori o pari a -0.05 come Sleeping Dogs. Le stime pari o superiori a +0.05 sono Persuadables; tra i casi rimanenti, una retention di base stimata di almeno 0.65 genera Sure Things, mentre gli altri sono etichettati come Lost Causes. I Sure Things ricevono un breve sondaggio senza offerta, mentre i Lost Causes e i segmenti sconosciuti ottengono un'uscita pulita. Si tratta di segmenti configurati basati su modelli, non di esiti causali individuali osservati.
La decisione di non contatto e la metrica di policy aggregata rispondono a domande diverse. Questo abbonato selezionato evita l'offerta attraverso il percorso operativo. Il confronto sulla coorte valuta in modo indipendente il targeting rispetto alle etichette sintetiche nascoste e non include ogni vincolo di segmento e di giurisdizione. Un esempio locale riuscito di non contatto non può cancellare i cinque contatti dannosi presenti in quel confronto aggregato.
Un'offerta idonea deve coprire il proprio costo e preservare la cancellazione
L'abbonato sintetico Pro in questa schermata presenta un effetto stimato del trattamento di +12.1 punti percentuali e una retention di base stimata del 58.6%. Un effetto positivo del trattamento da solo non autorizza uno sconto. La demo confronta la retention stimata con l'offerta al netto dello sconto configurato del 16.7% rispetto alla retention senza intervento, applicando poi l'instradamento del singolo abbonato e i controlli di giurisdizione configurati.
Il confronto economico consiste nella retention trattata stimata moltiplicata per (1 meno lo sconto), meno la retention di controllo stimata. Un Persuadable idoneo raggiunge l'agente di salvataggio solo quando il guadagno stimato copre il costo dell'offerta. L'esempio con obiettivo standard utilizza una risposta reale memorizzata nella cache di Codex; il copy gate viene eseguito nuovamente sulle parole restituite.
Un'offerta opzionale approvata compare accanto a Confirm cancellation. Il budget di interazione configurato consente al massimo un'offerta di salvataggio e due turni dell'agente; la cancellazione rimane disponibile durante la stesura della bozza e dopo la verifica. Review complete sullo schermo si riferisce alla pipeline automatizzata, non a una revisione umana completata. L'accettazione dell'offerta e la cancellazione modificano solo questa anteprima locale, senza alterare alcun account di fatturazione.
Ispezionare una frase bloccata separatamente dal modello di redazione
Il gate Python indipendente normalizza Unicode e verifica la bozza effettiva rispetto ai pattern configurati di confirmshaming, senso di colpa, pressione e urgenza artificiale. Un'autorizzazione di instradamento è quindi seguita da una decisione separata sul testo. Solo il copy approvato raggiunge l'anteprima dell'abbonato; le bozze bloccate e sospese rimangono interne.
Lo screenshot con il conto alla rovescia artificiale qui sotto mostra un testo di riferimento redatto deliberatamente: "This deal disappears in 04:59. Act now!". Il gate lo blocca ed evidenzia le frasi corrispondenti di countdown e urgenza. Dimostra un controllo configurato su testo fornito, anziché un modello sorpreso a generare un messaggio vietato.
Tutte le 16 risposte memorizzate nella cache del modello sono state approvate durante la verifica del brief, incluse le bozze con obiettivo aggressivo. La scelta di un obiettivo avversariale non determina quindi un esito di blocco. È il testo effettivo restituito a determinare il verdetto. Le etichette di citazione nella traccia di controllo sono riferimenti illustrativi configurati, non un'interpretazione o certificazione legale.
Una sospensione per revisione tiene il copy incerto lontano dall'abbonato
Il caso redatto successivo recita: "Before you decide, take a quick tour.". Corrisponde ai flag configurati di riconsiderazione e restituisce needs_review. Tale esito trattiene la frase internamente. Non approva il messaggio né dimostra che una persona abbia esaminato o risolto la sospensione.
Il benchmark locale fisso riporta 14 of 14 controlli espliciti superati: sei aspettative su economia, modello e sufficienza dei dati, oltre a otto aspettative su copy e instradamento. I controlli sul copy includono testo pulito, confirmshaming, conto alla rovescia artificiale, riconsiderazione borderline, evasione del countdown tramite Unicode e revisione del copy sovradimensionato. I controlli di instradamento verificano il comportamento di offerta singola/cancellazione e l'uscita pulita per segmenti sconosciuti. Si tratta di evidenze di implementazione su una suite di riferimento fissa, non di un'accuratezza generale di rilevamento, di una convalida indipendente del modello o di una certificazione legale.
Dati insufficienti modificano la decisione, non solo l'etichetta di avviso
Pinegrove sintetico ha 180 intenti mensili di cancellazione e 520 osservazioni storiche, suddivise in 242 trattate e 278 di controllo. I minimi configurati sono 500 intenti correnti e 400 osservazioni in ciascun braccio di holdout. Entrambi i controlli falliscono, quindi l'instradamento causale si astiene.
L'interfaccia utente trattiene le previsioni causali dalle evidenze decisionali, salta l'agente di salvataggio e adotta una prudente uscita pulita. Le stime interne possono comunque essere calcolate; non vengono utilizzate per selezionare un'offerta di salvataggio in questo percorso di astensione. Le soglie rappresentano salvaguardie configurate della demo anziché regole universali di sufficienza statistica, e l'aggiunta di dati richiederebbe comunque di valutare se lo storico randomizzato sia rappresentativo della decisione da prendere.
Mantenere la decisione selezionata distinta dal riepilogo della coorte
Ogni esecuzione completata salva una ricevuta con l'abbonato selezionato, gli input, il timestamp, l'instradamento e la trascrizione verificata. Le esportazioni in JSON e HTML stampabile consentono a un revisore di ispezionare esattamente quella decisione. L'impatto economico delle policy a livello di account viene presentato come un confronto sintetico separato, pertanto un valore di coorte non implica che ogni abbonato sia stato esaminato o che ogni offerta sia stata inviata.
La vista di audit elenca le ultime 50 ricevute salvate, e i file locali sopravvivono ai riavvii. Una ricevuta archiviata preserva le evidenze specifiche dell'esecuzione all'interno di questa dimostrazione a singolo processo; non dimostra custodia indipendente, protezione anti-manomissione o conformità normativa. Una valutazione per l'ambiente di produzione dovrebbe stabilire l'accesso ai dati, la titolarità delle evidenze, l'autorità di revisione e la persistenza operativa per il contesto previsto.
