Instruction tuning
Definizione rapida
Addestramento successivo al pre-training che rende un modello più capace di seguire istruzioni e richieste esplicite.
Spiegazione
Il processo usa esempi di istruzioni e risposte o altri segnali supervisionati per orientare il comportamento del modello. Non garantisce obbedienza perfetta e non sostituisce policy, controlli o valutazioni.
Esempio pratico
Un modello pre-addestrato viene ulteriormente addestrato su esempi che mostrano come classificare una richiesta e rispondere nel formato stabilito.
Spiegazione tecnica
I pesi vengono aggiornati su dati di istruzione, spesso con obiettivi supervisionati; la qualità dipende da copertura, accuratezza e sicurezza degli esempi.
Da non confondere con
Non è prompt engineering: il tuning modifica il modello, mentre il prompt interviene al momento dell’uso.