MMLU
Verificato
Significato di «MMLU»
Benchmark che valuta conoscenza e ragionamento dei modelli linguistici con domande a scelta multipla su 57 materie, dalla matematica al diritto alla medicina. E un riferimento diffuso per confrontare i modelli, pur esposto al rischio di contaminazione dei dati di test.
Fonti: Massive Multitask Language Understanding, 57 materie, scelta multipla. Fonti: Hendrycks et al., "Measuring Massive Multitask Language Understanding" (arXiv:2009.03300, ICLR 2021); Hugging Face (dataset cais/mmlu). Verifica web 2026-08-03. · Verificato il 2026-08-03