Dizionario AI › Fondamenti AI

Classifica di valutazione (Leaderboard)

Leaderboard

Una leaderboard è una classifica pubblica che ordina i modelli AI in base ai punteggi ottenuti su uno o più benchmark. Permette a ricercatori, aziende e sviluppatori di confrontare rapidamente le prestazioni di modelli diversi su compiti comuni, come comprensione del linguaggio, ragionamento matematico o generazione di codice. È uno strumento di riferimento molto usato per orientarsi tra le decine di modelli disponibili.

Definizione

Come funziona

Ogni leaderboard definisce le proprie regole: quali test include, come vengono pesati i punteggi e con quale frequenza viene aggiornata. Alcune si basano su test automatici standardizzati, altre integrano voti di preferenza raccolti da utenti reali che confrontano risposte di modelli diversi. I punteggi vengono ricalcolati man mano che escono nuovi modelli o nuove versioni di quelli esistenti.

Applicazioni

Le leaderboard vengono consultate da chi deve scegliere un modello per un prodotto, da ricercatori che vogliono posizionare il proprio lavoro rispetto allo stato dell'arte e da chi comunica i progressi di un nuovo modello al pubblico. Sono diventate un riferimento comune nel dibattito su quale sistema sia più avanzato in un dato momento.

Storia ed etimologia

Le leaderboard per l'AI si sono diffuse insieme alla proliferazione dei modelli linguistici, quando è diventato utile avere punti di riferimento condivisi e aggiornabili invece di confronti isolati tra due soli sistemi.

Come si usa in Grace

Grace mostra classifiche interne agli utenti: i punteggi ottenuti negli scenari vengono confrontati con quelli della community, in modo simile a una leaderboard, per stimolare il miglioramento continuo.

Termini correlati

Altri termini in Fondamenti AI

Mettilo alla prova

Dalla nostra rete

INDACO TMS: Transport Management for European Logistics

Shipment tracking, multi-carrier EDI and automated invoicing in one cloud platform. Invoices generated in under 10 seconds.

Vai su indacotms.com →

Dal blog di Agora Intelligence

Altro su agora-intelligence.com →

📱 Scarica l'app Android (beta) iOS in arrivo

Dì quello che intendi. Ottieni quello che ti serve.

Grace Certified, la coach AI che allena e certifica il tuo prompt engineering, di Agora Intelligence.