Trasformare i dati in opportunità: Metric in Motion – Rilevamento dei duplicati basato sull’intelligenza artificiale

I dati di alta qualità sono più di un semplice parametro di riferimento: sono una necessità strategica per garantire fiducia, conformità e interoperabilità a livello globale. In questo blog, Zornitsa Manolova, responsabile della qualità dei dati e della scienza dei dati presso la GLEIF, illustra come l’intelligenza artificiale stia ulteriormente migliorando il rilevamento dei duplicati per promuovere un’identificazione univoca e affidabile delle entità all’interno del Sistema LEI globale.

---

---

Ogni identificativo della persona giuridica (LEI) è unico e può rappresentare una sola persona giuridica. Ogni persona giuridica può avere un solo codice LEI. Questi principi sono alla base del Sistema globale di identificazione delle persone giuridiche e consentono a chiunque, in qualsiasi parte del mondo, di identificare le persone giuridiche con sicurezza.

Prevenire la presenza di record LEI duplicati è quindi essenziale per preservare la fiducia nel Sistema LEI globale e costituisce una parte fondamentale del programma proattivo di gestione della qualità dei dati della GLEIF. Un processo ben consolidato di rilevamento e correzione dei duplicati – che comprende controlli preventivi, l’impegno e la revisione da parte degli emittenti di codici LEI, nonché chiare procedure operative – fa sì che i potenziali duplicati rappresentino già meno dello 0,2% di tutti i record presenti nel Sistema Globale LEI.

Rafforzare il rilevamento dei duplicati con l’IA

Poiché i volumi e la complessità dei dati continuano ad aumentare, la GLEIF si impegna a migliorare ulteriormente i processi di individuazione dei duplicati. In particolare, l’IA offre nuove opportunità per promuovere un approccio più accurato, scalabile e coerente.

Un controllo chiave già potenziato dall’IA è la funzione “Verifica duplicati” della GLEIF.

“Verifica duplicati” è una funzionalità che consente agli emittenti di codici LEI di verificare se il LEI proposto e i dati di riferimento associati possano già esistere nell’Indice globale dei codici LEI prima della pubblicazione di un nuovo LEI. Durante il processo di emissione, i nuovi record vengono confrontati sia con l’Indice LEI completo sia con i record non ancora emessi da altri emittenti di codici LEI. Ciò contribuisce a garantire che, anche nel caso in cui la stessa persona giuridica si rivolga a più emittenti di codici LEI, i potenziali duplicati possano essere identificati e risolti prima della pubblicazione.

Grazie al supporto dell’intelligenza artificiale, la funzione va ora oltre il precedente algoritmo, che si basava principalmente sulla corrispondenza approssimativa dei nomi. Consente un rilevamento più tempestivo, un confronto più efficace dei record potenzialmente correlati e una risoluzione coordinata prima della pubblicazione.

Come funziona

Il processo potenziato di rilevamento dei duplicati segue un flusso di lavoro strutturato che consiste in tre fasi principali:

• Pre-elaborazione:
  Il record inviato viene ripulito e standardizzato. Ciò include la rimozione della punteggiatura, la normalizzazione degli spazi, l’analisi del record per estrarre i dati di riferimento rilevanti e la generazione di vettori di embedding per il confronto successivo.
• Filtraggio:
  Un backend potenziato dall’intelligenza artificiale identifica quindi le potenziali corrispondenze. Il processo verifica innanzitutto il codice LEI, quindi confronta le autorità di registrazione e gli identificatori di registrazione. Anche gli elementi dei dati di riferimento selezionati vengono convertiti in rappresentazioni vettoriali e confrontati con i record esistenti nell’Indice globale dei codici LEI. I record con potenziali corrispondenze vengono quindi trasferiti alla fase di valutazione.
• Valutazione:
  Questa fase valuta ulteriormente queste potenziali corrispondenze per ridurre i falsi positivi. Prende in considerazione elementi quali la denominazione legale, la forma giuridica, l’indirizzo, la giurisdizione e la data di costituzione dell’entità, con un trattamento aggiuntivo per categorie specifiche quali fondi e filiali.

Rilevamento dei duplicati più veloce, scalabile e coerente

Nel suo insieme, questo processo rafforza il rilevamento dei duplicati consentendo:

• Un rilevamento più rapido e tempestivo di potenziali registrazioni duplicate prima che un nuovo LEI venga pubblicato nell’Indice globale dei codici LEI.
• Una maggiore scalabilità man mano che il Sistema Globale LEI continua a crescere, poiché l’uso di embedding vettoriali consente di confrontare i record con grandi volumi di dati di riferimento LEI esistenti.
• Un approccio coerente e standardizzato, indipendente dalla natura e dall’ubicazione degli emittenti di codici LEI.
• Controlli più rigorosi sulla qualità dei dati, grazie alla verifica di molteplici elementi, tra cui il codice LEI, l’autorità di registrazione, gli identificatori, la denominazione legale, l’indirizzo, la giurisdizione e la forma giuridica.

Sfruttare il potenziale dell’IA per il rilevamento dei duplicati

Grazie alla pre-elaborazione, al filtraggio e al punteggio supportati dall’IA, è evidente come l’IA stia rendendo la funzione “Verifica duplicati” più scalabile, efficiente e sensibile al contesto.

Affinché l’IA fornisca risultati affidabili, deve basarsi su dati completi e attendibili ed essere supportata da una Governance chiara. Alla GLEIF, tale governance è rafforzata da una gestione proattiva della qualità dei dati, da processi di convalida consolidati e dal monitoraggio continuo del Sistema LEI Globale. Le raccomandazioni dell’IA sono integrate da un processo decisionale trasparente, dal continuo perfezionamento dei modelli di rilevamento e dalla competenza e supervisione umana, al fine di garantire risultati accurati e coerenti.

Insieme, questi elementi sostengono il costante impegno della GLEIF nella gestione proattiva della qualità dei dati e nel mantenimento della fiducia in tutto il Sistema LEI globale.

---