Deduplicazione
Definizione rapida
Eliminazione o raggruppamento di elementi duplicati o quasi identici per ridurre rumore e risultati ripetuti.
Spiegazione
La deduplicazione confronta identificativi, forme normalizzate o contenuti simili e sceglie quale record conservare come riferimento. Deve evitare di fondere elementi distinti solo perché condividono parole comuni.
Esempio pratico
Un import raggruppa due schede con lo stesso slug e mantiene la versione con fonte e metadati completi.
Spiegazione tecnica
Il confronto può essere esatto, normalizzato o basato su similarità; le regole devono essere deterministiche e registrare le decisioni irreversibili.
Da non confondere con
Non è la cancellazione indiscriminata: deduplicare richiede una regola per riconoscere equivalenza e un criterio di conservazione.