Dizionario AI › Fondamenti AI

Calibrazione del modello (Model Calibration)

Model Calibration

La calibrazione del modello misura quanto la fiducia dichiarata da un sistema AI nelle proprie risposte corrisponda alla probabilità reale che quelle risposte siano corrette. Un modello ben calibrato, quando dice di essere sicuro al 90%, ha effettivamente ragione circa nel 90% dei casi analoghi. Un modello mal calibrato può essere troppo sicuro di risposte sbagliate o troppo cauto su risposte corrette, rendendo difficile fidarsi dei suoi segnali di incertezza.

Definizione

Come funziona

Per valutarla si raccolgono molte previsioni del modello insieme al relativo livello di confidenza dichiarato, poi si confronta la confidenza media con la frequenza reale di risposte corrette in ciascuna fascia. Gli scostamenti tra confidenza dichiarata e accuratezza osservata vengono riassunti in metriche numeriche che quantificano l'errore di calibrazione. Tecniche di post-elaborazione possono poi correggere le stime di confidenza troppo ottimistiche o pessimistiche.

Applicazioni

È particolarmente rilevante in ambiti dove le decisioni si basano sul livello di certezza del modello, come diagnosi assistite, valutazione del rischio o sistemi che devono sapere quando chiedere conferma a un essere umano. Una buona calibrazione permette di usare la confidenza del modello come segnale affidabile per instradare i casi incerti verso una revisione.

Storia ed etimologia

Il concetto proviene dalla statistica previsionale, dove la calibrazione delle probabilità è studiata da decenni per valutare la qualità delle previsioni meteorologiche e di altri modelli probabilistici, prima di essere applicata ai sistemi di apprendimento automatico.

Termini correlati

• Valutazione del modello (Model Evaluation)
• Metriche di valutazione
• Allucinazione (AI Hallucination)
• Valutazione umana (Human Evaluation)
• Interpretabilità

Altri termini in Fondamenti AI

• LLM (Large Language Model)
• Token
• Context Window
• Temperature
• Allucinazione (AI Hallucination)
• Fine-tuning
• RAG (Retrieval Augmented Generation)
• Embedding

Mettilo alla prova

• Scenario reale: applica questo concetto con un verdetto AI immediato.
• Palestra quotidiana: brevi esercizi per allenare i concetti del dizionario.
• Gioco Playoff: sfida altri giocatori, a eliminazione diretta.

📱 Scarica l'app Android (beta) iOS in arrivo

Dì quello che intendi. Ottieni quello che ti serve.

Grace Certified, la coach AI che allena e certifica il tuo prompt engineering, di Agora Intelligence.