Retentieaanbiedingen moeten hun kosten terugverdienen.

Een hoge churnscore bewijst nog geen nuttige aanbieding

Een abonnee vertrekt mogelijk waarschijnlijk zonder dat deze waarschijnlijk profiteert van een korting. Elke opzeggingsintentie een behoudsaanbieding doen, besteedt ook budget aan mensen die zouden blijven en kan mensen contacteren van wie het behoud door de interventie wordt geschaad.

In het synthetische Northwind levert voorspellende churn-targeting +$144,162 aan jaarlijkse incrementele omzet op en causale uplift +$187,956. Beide contacteren 2,239 abonnees. Deze vergelijking onderzoekt wie de aanbieding ontvangt bij hetzelfde budget, in plaats van uplift te belonen voor het leggen van minder contacten.

Volg het retentiebesluit van economie tot bewijsvoering

Deze zes oorspronkelijke opnames tonen een synthetische retentievergelijking, besluiten voor geselecteerde abonnees en controles op opgestelde teksten. Northwind heeft 6,000 actuele maandelijkse opzeggingsintenties en 9,000 gerandomiseerde historische waarnemingen: 4,460 behandeld en 4,540 controle. De beoordelingswachtrij van 32 gevallen is een representatieve selectie ter inspectie, geen aselecte steekproef van het cohort. Elke screenshot opent op volledige grootte.

Vergelijk beleidsvormen bij hetzelfde contactbudget

Iedereen behouden contacteert alle 6,000 opzeggingsintenties en levert in deze testopstelling een negatieve incrementele waarde op. Voorspellende churn-targeting en causale uplift contacteren elk 2,239 abonnees, maar kiezen hen om verschillende redenen: de een rangschikt op de waarschijnlijkheid van vertrek, terwijl de ander rangschikt op de geschatte interventiewaarde na aftrek van de kortingskosten. Door het budget gelijk te stellen, wordt dat onderscheid in targeting geïsoleerd.

Uplift overtreft churn-targeting met $43,794 per jaar in deze synthetische beleidsevaluatie. Waarden worden gescoord tegen verborgen synthetische potentiële uitkomsten en geannualiseerd met behulp van de maandelijkse omzet vermenigvuldigd met 12. Het zijn noch gerealiseerde klantbesparingen, noch prognoses voor het volledige operationele routeringssysteem. Het orakel ziet verborgen uitkomsten die niet beschikbaar zijn voor een geïmplementeerd model, waardoor het een plafond met perfecte informatie biedt in plaats van een uitvoerbaar beleid.

De rangschikkingscurve voegt een afzonderlijke controle toe op 2,700 held-out gerandomiseerde synthetische waarnemingen. AUUC staat voor area under the uplift curve: de weergegeven waarden zijn 78.8 voor uplift, ongeveer 42.3 voor voorspellende churn en ongeveer 4.2 voor willekeurige rangschikking. Het zijn geen nauwkeurigheidspercentages. Uplift contacteert nog steeds vijf van de 673 abonnees die in de synthetische ground truth worden geschaad door een interventie, waardoor er 668 niet worden gecontacteerd; een verbeterde rangschikking garandeert geen perfecte bescherming.

Leg uit waarom een abonnee geen retentiecontact zou moeten ontvangen

Voor één synthetische Northwind-abonnee schat het model een retentie van 87.1% zonder interventie en 28.2% ermee. Het verschil is -58.9 procentpunten. Het label Sleeping Dog betekent dat de interventie naar schatting de retentie schaadt; routering voor geselecteerde abonnees kiest daarom voor Do Not Contact en slaat de behoudsagent over.

De routeringsregel labelt geschatte behandelingseffecten van -0.05 of lager als Sleeping Dogs. Schattingen van +0.05 of hoger zijn Persuadables; onder de overige gevallen levert een geschatte basisretentie van ten minste 0.65 Sure Things op, terwijl de andere als Lost Causes worden gelabeld. Sure Things ontvangen een korte enquête zonder aanbieding, terwijl Lost Causes en onbekende segmenten een ordelijke beëindiging krijgen. Dit zijn geconfigureerde, op modellen gebaseerde segmenten, geen waargenomen individuele causale uitkomsten.

Het besluit om geen contact op te nemen en de geaggregeerde beleidsmetriek beantwoorden verschillende vragen. Deze geselecteerde abonnee vermijdt een aanbieding via de operationele route. De cohortvergelijking scoort targeting onafhankelijk tegen verborgen synthetische labels en omvat niet elke segment- en jurisdictiebeperking. Een succesvol lokaal voorbeeld van geen contact kan de vijf schadelijke contacten in die geaggregeerde vergelijking niet uitwissen.

Een in aanmerking komende aanbieding moet de kosten dekken en opzegging behouden

De synthetische Pro-abonnee in deze schermopname heeft een geschat behandelingseffect van +12.1 procentpunten en een geschatte basisretentie van 58.6%. Een positief behandelingseffect alleen geeft geen toestemming voor een korting. De demo toetst de geschatte retentie met de aanbieding na de geconfigureerde korting van 16.7% aan de retentie zonder interventie, en past vervolgens routering voor geselecteerde abonnees en geconfigureerde jurisdictiecontroles toe.

De economische vergelijking is de geschatte behandelde retentie vermenigvuldigd met (1 min de korting), verminderd met de geschatte controleretentie. Een in aanmerking komende Persuadable bereikt de behoudsagent pas wanneer de geschatte winst de kosten van de aanbieding dekt. Het voorbeeld met de standaarddoelstelling gebruikt een feitelijke gecachte Codex-reactie; de tekstpoort voert opnieuw uit op die geretourneerde woorden.

Eén goedgekeurde optionele aanbieding verschijnt naast Confirm cancellation. Het geconfigureerde interactiebudget staat maximaal één behoudsaanbieding en twee agent-beurten toe; opzeggen blijft beschikbaar tijdens het opstellen van het concept en na het screenen. Review complete op het scherm verwijst naar de geautomatiseerde pijplijn, niet naar een voltooide menselijke beoordeling. Het accepteren van de aanbieding en opzeggen wijzigen alleen deze lokale voorvertoning, zonder een facturatieaccount te wijzigen.

Inspecteer een geblokkeerde zin afzonderlijk van het opstellende model

De onafhankelijke Python-poort normaliseert Unicode en controleert het feitelijke concept op geconfigureerde patronen voor confirmshaming, schuldgevoel, druk en kunstmatige urgentie. Een routeringstoestemming wordt daarom gevolgd door een afzonderlijk besluit over de bewoording. Alleen goedgekeurde tekst bereikt de abonneevoorvertoning; geblokkeerde en aangehouden concepten blijven intern.

Het screenshot met de kunstmatige afteltimer hieronder is bewust opgestelde referentietekst: "This deal disappears in 04:59. Act now!" De poort blokkeert dit en toont de overeenkomende aftel- en urgentiezinnen. Het demonstreert een geconfigureerde controle op aangeleverde tekst, in plaats van een model dat betrapt is op het produceren van een verboden bericht.

Alle 16 opgeslagen model-cache-antwoorden werden goedgekeurd toen de opdracht werd geverifieerd, inclusief concepten met een agressieve doelstelling. Het kiezen van een confronterende doelstelling leidt daarom niet per se tot een geblokkeerde uitkomst. De feitelijke geretourneerde tekst bepaalt het oordeel. Verwijzingslabels in het controlespoor zijn illustratieve geconfigureerde verwijzingen, geen juridische interpretatie of certificering.

Een beoordelingsaanhouding houdt onzekere tekst weg bij de abonnee

De volgende opgestelde case luidt: "Before you decide, take a quick tour." Deze komt overeen met de geconfigureerde heroverwegingsvlaggen en retourneert needs_review. Die uitkomst houdt de zin intern aan. Het keurt het bericht niet goed en toont evenmin aan dat een persoon de aanhouding heeft beoordeeld of opgelost.

De vaste lokale benchmark meldt dat 14 of 14 expliciete controles zijn geslaagd: zes verwachtingen rond economie, model en datatoereikendheid, plus acht verwachtingen rond tekst en routering. Tekstcontroles omvatten zuivere tekst, confirmshaming, een kunstmatige afteltimer, grensgeval-heroverweging, omzeiling van afteltimers via Unicode en beoordeling van te lange teksten. Routeringscontroles verifiëren het gedrag met één aanbieding/opzegging en een ordelijke beëindiging voor onbekende segmenten. Dit is implementatiebewijs op een vaste referentiesuite, geen algemene detectienauwkeurigheid, onafhankelijke modelvalidatie of juridische certificering.

Onvoldoende gegevens veranderen het besluit, niet alleen het waarschuwingslabel

Synthetisch Pinegrove heeft 180 maandelijkse opzeggingsintenties en 520 historische waarnemingen, verdeeld over 242 behandeld en 278 controle. De geconfigureerde minima zijn 500 actuele intenties en 400 waarnemingen in elke holdout-arm. Beide controles falen, waardoor causale routering zich onthoudt van een besluit.

De gebruikersinterface onthoudt causale voorspellingen in het besluitbewijs, slaat de behoudsagent over en kiest voor een conservatieve, ordelijke beëindiging. Interne schattingen kunnen nog steeds worden berekend; ze worden in dit onthoudingspad niet gebruikt om een behoudsaanbieding te kiezen. De drempelwaarden zijn geconfigureerde waarborgen voor de demo in plaats van universele regels voor statistische toereikendheid, en het toevoegen van gegevens zou nog steeds vereisen dat wordt beoordeeld of de gerandomiseerde geschiedenis representatief is voor het te nemen besluit.

Houd het geselecteerde besluit gescheiden van het cohortoverzicht

Elke voltooide uitvoering slaat een bewijs op met de geselecteerde abonnee, invoergegevens, tijdstempel, route en het gescreende transcript. Met JSON- en afdrukbare HTML-exports kan een beoordelaar dat exacte besluit inspecteren. Beleidseconomie op accountniveau verschijnt als een afzonderlijke synthetische vergelijking, zodat een cohortwaarde niet impliceert dat elke abonnee is beoordeeld of dat elke aanbieding is verzonden.

De auditweergave toont de nieuwste 50 opgeslagen bewijzen, en lokale bestanden blijven behouden na een herstart. Een opgeslagen bewijs bewaart het uitvoeringsspecifieke bewijsmateriaal binnen deze demonstratie in één proces; het toont geen onafhankelijk beheer, aantoonbaarheid van manipulatie of toereikendheid voor toezichthouders aan. Een productiebeoordeling zou datatoegang, eigenaarschap van bewijsmateriaal, beoordelingsbevoegdheid en operationele persistentie voor de beoogde omgeving moeten vaststellen.

Vragen die retentieteams stellen