Dizionario AI › Fondamenti AI
Data poisoning
Il data poisoning è un attacco in cui qualcuno inserisce di proposito dati corrotti o ingannevoli nel materiale usato per addestrare un modello, così da manipolarne il comportamento. È come sabotare la biblioteca da cui uno studente studia: se infili libri con errori mirati, lo studente imparerà quelle falsità e le ripeterà con convinzione. Nel caso dell'IA basta inquinare una piccola frazione dei dati per installare una "porta sul retro": un innesco nascosto, ad esempio una parola o un simbolo specifico, che fa scattare un comportamento indesiderato solo quando compare. Il modello sembra normale in tutti gli altri casi, il che rende l'attacco difficile da individuare.
Il data poisoning conta perché molti dati di addestramento provengono da fonti aperte e non verificate, come il web. Un avversario paziente può contaminarle in anticipo, e i difetti restano invisibili finché non vengono attivati, minando la fiducia nell'intera pipeline dei dati.
Dalla nostra rete
AGORÀ Intelligence: Enterprise AI Governance Platform
Govern AI at scale: policies, adoption and measurable results on your data. Built for boards and C-suite.
Vai su agora-intelligence.com →Dal blog di Agora Intelligence
📱 Scarica l'app Android (beta) iOS in arrivo
Dì quello che intendi. Ottieni quello che ti serve.
Grace Certified, la coach AI che allena e certifica il tuo prompt engineering, di Agora Intelligence.