Ingestion

Definizione rapida

Processo con cui documenti e dati vengono acquisiti, estratti, puliti e preparati prima dell’indicizzazione.

Spiegazione

Una pipeline di ingestion controlla formato, origine, codifica, duplicati, metadati e autorizzazioni. Errori in questa fase si propagano all’indice e possono compromettere la ricerca o la risposta generata.

Esempio pratico

Un PDF viene acquisito, sottoposto a OCR, diviso in sezioni, associato alla sua fonte e inviato all’indice solo dopo la validazione.

Spiegazione tecnica

Il flusso comprende connettori, coda o batch, normalizzazione, arricchimento, controlli e gestione degli scarti; deve mantenere la provenienza del dato.

Da non confondere con

Non è un semplice upload: l’ingestion comprende la preparazione controllata per l’uso successivo.