Dashboard di scoring dei fornitori che classifica un fornitore da 71 sotto uno da 92, nonostante una consegna migliore.
Artificial IntelligenceProcurementBusiness

La tua IA di procurement ha valutato più in basso il fornitore migliore — ecco la matematica che l'ha deciso

Ashutosh SinghalAshutosh Singhal8 giugno 202611 min

Lo scorso trimestre ho passato una lunga serata a fissare una singola scheda di valutazione dei fornitori, e questo ha demolito una convinzione che mi ero portato dietro per anni di lavoro nel procurement.

Era un evento di routine — elementi di fissaggio industriali, cinque fornitori, il tipo di categoria per cui nessuno perde il sonno. L'IA della piattaforma li aveva classificati su consegna, qualità, stabilità finanziaria e prezzo. Il Fornitore A, un incumbent con dodici anni di attività e migliaia di transazioni alle spalle, si è piazzato a 92. Un'impresa certificata di proprietà di una minoranza, con tre anni di storia, ha totalizzato 71. In superficie, è un risultato pulito. L'incumbent ha vinto per merito. Si va avanti.

Solo che io non sono andato avanti. Ho scomposto i sotto-punteggi di consegna, riga per riga, e ciò che ho trovato è il motivo per cui oggi mi guadagno da vivere costruendo audit di equità dell'IA nel procurement. Il fornitore più piccolo aveva un migliore tasso di consegne puntuali — 98,1% contro il 97,2% dell'incumbent. Eppure ha ottenuto un punteggio più basso sulla consegna.

Il fornitore che ha performato meglio è stato classificato peggio. Non perché il modello avesse un pregiudizio contro di lui — ma perché ce l'aveva la matematica.

Quel divario, tra ciò che dicevano i dati e ciò che diceva il punteggio, è l'intera storia. Lascia che ti mostri come accade, perché nessuna piattaforma di procurement sul mercato lo risolverà per te, e cosa ci è voluto davvero per costruire qualcosa che potesse farlo.

Il pregiudizio non è nel modello. È nella storia.

Due pannelli fornitore: 97,2% su 4.200 transazioni ottiene 24,1/25; 98,1% su 180 transazioni ottiene 16,8/25.

Ecco la parte che ho impiegato troppo tempo ad accettare: non c'era nulla di malevolo in quell'algoritmo. Nessuno aveva codificato una penalità per i fornitori diversificati. Il pregiudizio era una conseguenza strutturale dell'addestramento sui dati storici di spesa — e una volta che lo vedi, non puoi più non vederlo.

La performance di consegna valeva il 25% del punteggio del fornitore, e l'IA la calcolava come tasso di puntualità ponderato per il numero di transazioni. Il 97,2% dell'incumbent su 4.200 transazioni generava un punteggio di consegna ponderato per la confidenza di 24,1 su 25. Il 98,1% del fornitore di proprietà di una minoranza, su appena 180 transazioni, generava un 16,8. Stessa metrica. Numero grezzo migliore. Otto punti persi — solo per la ponderazione di confidenza.

Poi lo stesso schema si ripeteva ovunque. La valutazione della qualità si appoggiava alla frequenza degli audit, e la frequenza degli audit è correlata al volume di contratti. La valutazione della stabilità finanziaria trattava la dimensione del fatturato come un proxy della tolleranza al rischio. Quando il modello arrivava alla competitività di prezzo, il divario era già matematicamente insormontabile.

L'esclusione si autoalimenta, ed è questo a renderla odiosa. Un fornitore ottiene un punteggio più basso, quindi vince meno contratti, quindi accumula meno transazioni, quindi il suo punteggio di confidenza è ancora più basso al ciclo successivo. L'algoritmo equipara più dati storici a più affidabile — e qualsiasi fornitore a cui non è mai stata data la possibilità di costruire quella storia lo paga per sempre.

Un'IA addestrata sulla tua storia di spesa non predice il fornitore migliore. Predice il fornitore che hai già usato.

Perché la tua piattaforma di procurement non lo risolverà per te?

Il mio primo istinto è stato quello ovvio: sicuramente SAP, Coupa, GEP o Ivalua se ne occupano già. Stanno riversando enormi investimenti ingegneristici nell'IA agentica. il Bid Analysis Agent di Joule confronta le offerte dei fornitori e raccomanda le assegnazioni. Navi di Coupa esegue la ricerca dei fornitori in linguaggio naturale e l'azienda ha registrato qualcosa come 15 miliardi di dollari di risparmi per i clienti in un solo trimestre. Ivalua distribuisce più di trenta agenti IA pronti all'uso. GEP ha l'IA agentica su tutta la sua suite source-to-pay.

Così sono andato a cercare le metriche di equità. I test sull'impatto disparato. La metodologia pubblicata su come sottopongono ad audit i propri motori di scoring per l'impatto avverso.

Non ce ne sono. Ho verificato tutte e quattro le principali piattaforme. Nessuna di esse pubblica metriche di equità sullo scoring dei fornitori. Coupa riconosce nei post del blog che i fornitori di IA dovrebbero "dimostrare la mitigazione del pregiudizio" — ma dietro la frase non c'è alcun processo di audit documentato. È un argomento di conversazione, non una funzionalità.

E onestamente, una volta che comprendi l'economia delle piattaforme, smetti di aspettartelo. Questi vendor costruiscono uno scoring generico ottimizzato per la riduzione dei costi e la mitigazione del rischio su tutta la loro base clienti. Aggiungere vincoli di equità calibrati sui tuoi obiettivi di subappalto, sulle tue categorie di fornitori, sulla tua giurisdizione normativa significherebbe mantenere una configurazione di modello diversa per ogni cliente che hanno. Non è una roadmap di prodotto. È un incubo per il supporto.

C'è un aspetto più tagliente di questo, che va oltre la comodità. I contratti sono sempre più scritti in modo che la responsabilità ricada su di te, non sul vendor — i tribunali federali stanno ampliando la responsabilità per l'IA, e gli accordi delle piattaforme spostano silenziosamente il rischio sul cliente. Così quando un fornitore scartato alla fine chiede perché il suo punteggio era 71, è il tuo nome sul rilievo dell'audit, non quello di SAP. E peggiora man mano che gli agenti diventano più autonomi: quando un bot innesca un'assegnazione o un pagamento di propria iniziativa — o allucina un accordo fantasma mai esistito — il contratto ha già fatto in modo che la responsabilità sia tua, non del vendor di IA. La piattaforma ti dà velocità. Lo strato di equità — e la responsabilità che ne deriva — sarebbe sempre stato tuo.

La soluzione che ero certo avrebbe funzionato — e che non funzionò

Ti racconto della versione che ho sbagliato, perché è la versione a cui la maggior parte dei team ricorre per prima.

Se il modello sottovaluta i fornitori più piccoli e diversificati, la soluzione intuitiva è mettere il pollice sulla bilancia dall'altra parte. Aggiungi un aggiustamento per la diversità. Dai qualche punto in più ai fornitori certificati per compensare la penalità di confidenza. Abbiamo abbozzato esattamente questo. Sembrava equo. Sembrava correttivo.

Era una trappola, e ciò che l'ha smascherata non è stato un problema ingegneristico — è stato uno legale.

Mentre costruivamo il bonus, stavo anche leggendo l'ambiente normativo in cui i nostri clienti appaltatori federali vivono davvero, e si era appena trasformato in un campo minato. Da un lato, la FAR Part 19 impone agli appaltatori di raggiungere obiettivi percentuali separati per i subappaltatori small-business, di proprietà di veterani, di proprietà di veterani disabili in servizio, HUBZone e di proprietà di donne — e l'applicazione si era da poco inasprita. Dall'altro lato, l'Executive Order 14319, firmato nel luglio 2025, vieta l'acquisto federale di IA che veicoli "pregiudizi ideologici o agende sociali", nominando esplicitamente la DEI.

Fermati un attimo su questo. Un appaltatore federale è ora legalmente obbligato a promuovere i fornitori diversificati in base a una norma, e legalmente vietato dall'incorporare un'agenda sociale nell'IA di procurement in base a un'altra. Il nostro bonus per la diversità — un pollice sulla bilancia codificato a favore di una categoria protetta — era esattamente il tipo di cosa che l'EO 14319 è stato scritto per eliminare. Avremmo spedito una responsabilità di conformità travestita da soluzione. Non sarebbe sopravvissuta al primo audit.

Nel momento in cui correggi un pregiudizio aggiungendo un pregiudizio diverso, hai costruito qualcosa che non puoi difendere in un'aula.

Quel fallimento è ciò che ha riformulato per me l'intero problema. L'obiettivo non è mai stato far favorire qualcuno all'IA. L'obiettivo era farle dimostrabilmente non favorire nessuno — e produrne la prova.

La regola sulle assunzioni che ha aperto una breccia

Barre della regola dei quattro quinti: 60% non diversificati, soglia minima 48%, 22% diversificati avanzati, rapporto di disparità 0,37.

La svolta è arrivata da una regola sulla discriminazione occupazionale che, per quanto ne so, quasi nessuno nel procurement stava applicando.

La regola dei quattro quinti dell'EEOC — 29 CFR 1607.4 — stabilisce che il tasso di selezione di qualsiasi gruppo deve essere almeno l'80% del tasso del gruppo più selezionato. È stata scritta per la discriminazione nelle assunzioni. Ma la selezione dei fornitori è strutturalmente identica alla selezione dei candidati: hai categorie, tassi di avanzamento e una soglia. Lo stesso test statistico si applica direttamente.

Così l'abbiamo eseguito sull'output reale dello scoring. Se un'IA fa avanzare oltre la soglia di scoring il 60% dei fornitori non diversificati, la regola dei quattro quinti dice che deve far avanzare almeno il 48% dei fornitori certificati di proprietà di minoranze e di donne. Nello scoring ponderato per volume, il tasso effettivo che continuavamo a osservare era più vicino al 22%. È un rapporto di disparità di 0,37 — meno della metà della soglia minima legale.

Quel numero non è un segnale debole. Un rapporto di disparità di 0,37 è una prova prima facie di impatto avverso — lo stesso standard che un tribunale applicherebbe a una denuncia di discriminazione nelle assunzioni. È il tipo di rilievo che si trasforma in perdite di contratti e rilievi di audit, non in un memo dai toni forti.

Ed è per questo che contava più di quanto qualsiasi bonus di equità avrebbe mai potuto: il test dei quattro quinti non favorisce nessuno. Si limita a misurare. Ci ha dato un modo per soddisfare entrambi i padroni in un colpo solo — per mostrare a un revisore della FAR Part 19 che i fornitori diversificati stavano ricevendo una possibilità equa, e per mostrare a un revisore dell'EO 14319 che avevamo aggiunto zero pollice ideologico sulla bilancia. Solo matematica, applicata simmetricamente, con un numero alla fine.

E questo non è solo un problema federale. La maggior parte degli stati incorpora già lo scoring sulla diversità nelle proprie valutazioni di procurement — il solo Illinois destina fino al 20% dei punti tecnici di una RFP alla diversità dei fornitori — quindi lo stesso rapporto di disparità che affonda un audit federale sottrae silenziosamente a un appaltatore statale i punti che gli era stato esplicitamente detto di catturare. Il test dei quattro quinti viaggia ovunque vada lo scoring.

Come si dimostra che un'IA di procurement è equa?

Così abbiamo smesso di cercare di aggiustare il modello di chiunque e abbiamo costruito uno strato di audit che gli si posa sopra. È il cuore di ciò che ora si trova su veriprajna.com/solutions/procurement-ai-fairness: un auditor di equità vendor-agnostico che si collega a SAP Ariba, Coupa, GEP o Ivalua, legge l'output di scoring dei fornitori che la piattaforma già produce e lo sottopone a test per l'impatto disparato.

Essere vendor-agnostici è stata una scelta deliberata, non una comodità. Non tocchiamo il modello della piattaforma — non dobbiamo, e francamente non vogliamo la responsabilità di riaddestrare il motore di scoring di qualcun altro. Trattiamo l'output dell'IA come l'oggetto sotto esame: estraiamo i tassi di selezione per categoria di fornitore, calcoliamo i rapporti di disparità dei quattro quinti, scomponiamo dove nello stack di scoring ha origine il divario (quasi sempre la ponderazione di confidenza, quasi mai il prezzo) e consegniamo al responsabile del procurement qualcosa che possa portare in una stanza.

Quest'ultima parte è il deliverable che conta. Non una dashboard che dice "sembra tutto a posto". Una prova matematica che l'IA tratta ogni categoria di fornitore in modo equo — oppure un rilievo specifico e documentato che così non è, con il rapporto di disparità e il fattore di scoring incriminato nominati. Qualcosa che un CPO può mettere davanti alla dirigenza, che un responsabile della conformità può protocollare e che un revisore non può liquidare con un gesto della mano.

"Ma non è solo un programma DEI con una calcolatrice?"

Questa è l'obiezione che ricevo più spesso, di solito da qualcuno che è stato scottato dai colpi di frusta normativi ed è diffidente verso tutto ciò che sa di agenda sociale. È una domanda legittima, e la risposta è no — e la distinzione è tutto il punto.

Un programma DEI decide in anticipo che un esito è desiderabile e vi indirizza. Un audit sull'impatto disparato non decide nulla. Misura se i tassi di selezione superano una soglia statistica consolidata da tempo che i tribunali applicano alle denunce di discriminazione. Se la tua IA supera il test dei quattro quinti, l'audit lo attesta e hai la tua prova di neutralità. Se lo fallisce, l'audit ti dice quale fattore di scoring l'ha causato — e la soluzione è quasi sempre rendere la matematica più accurata, non meno, perché ponderare per confidenza un tasso di consegna del 98,1% fino a un 16,8 non è né equo corretto.

Le persone mi chiedono anche perché questo sia urgente ora, quando l'IA nel procurement sembra ancora agli inizi. Ed è agli inizi — è esattamente questa la finestra. In tutto il settore, il 49% dei team di procurement sta conducendo progetti pilota di IA, ma solo il 4% ha raggiunto un'implementazione significativa. Il collo di bottiglia non è la tecnologia. È la fiducia. La dirigenza non darà il via libera a uno scoring autonomo dei fornitori che non può giustificare a uno stakeholder o a un regolatore. La prova di equità non è un optional aggiunto dopo l'implementazione. Per molte organizzazioni, è la cosa che sblocca l'implementazione.

La terza domanda riguarda sempre gli strumenti di scoperta della diversità — Supplier.io con il suo database di 20 milioni di fornitori, Tealbook, Fairmarkit. Questi non risolvono già il problema? No. Ti aiutano a trovare fornitori diversificati. Nessuno di essi verifica se il tuo algoritmo di scoring dia a quei fornitori una possibilità equa una volta che sono nell'imbuto. Trovare un fornitore qualificato di proprietà di una minoranza e poi lasciare che la ponderazione di confidenza lo seppellisca a 71 non è progresso. È una via più efficiente verso la stessa esclusione.

Il muro che nessuno intendeva costruire

Continuo a tornare a quella scheda di valutazione degli elementi di fissaggio. Cinque fornitori, un evento di routine, e un pezzo di matematica che ha silenziosamente deciso che un fornitore più performante meritava di perdere — non perché qualcuno lo volesse, ma perché l'algoritmo ha scambiato il familiare per il buono.

Ecco la questione del pregiudizio nell'IA di procurement. Non arriva come pregiudizio. Arriva come un intervallo di confidenza, un conteggio delle transazioni, una ponderazione del 25% dall'aspetto perfettamente ragionevole. Ogni passaggio è difendibile. Il muro che costruisce non lo è.

Non puoi tirartene fuori a suon di intenzioni, e non puoi aggiustarlo inclinando la bilancia dall'altra parte — ci ho provato, e la legge ha fatto bene a proibirlo. Puoi fare solo una cosa: misurarlo, dimostrarlo e rendere la prova qualcosa che consegneresti a un revisore senza esitare. Quella posizione di misurazione-non-correzione è tutto ciò che costruiamo in Veriprajna. La tua IA di procurement è veloce. L'unica domanda che conterà, la prima volta che un fornitore scartato chiederà perché, è se puoi dimostrare che è stata equa. Se puoi mostrare il rapporto di disparità e l'audit che l'ha prodotto, hai una risposta. Se non puoi, non hai un problema di equità — hai un problema di discovery in attesa di un mandato di comparizione.

Ricerca correlata

Pubblicato anche su

Costruisci la tua IA con fiducia.

Collabora con un team che vanta una profonda esperienza nella creazione della prossima generazione di IA aziendale. Lascia che ti aiutiamo a progettare, sviluppare e implementare una strategia di IA di cui ti puoi fidare.

Veriprajna società di consulenza Deep Tech è specializzata nella creazione di sistemi di IA safety-critical per i settori sanitario, finanziario e regolamentato. Le nostre architetture sono validate rispetto a protocolli consolidati con una documentazione di conformità completa.