Subword
Verificato
Aggiornato il 10/09/2026
Significato di «Subword»
Unità di tokenizzazione intermedia, più piccola della parola ma più grande del carattere, con cui i modelli scompongono i termini. Permette di rappresentare parole rare o mai viste componendole da frammenti noti, limitando il vocabolario e i token fuori dizionario. Algoritmi diffusi sono BPE, WordPiece e SentencePiece.
Fonti: Sennrich et al. 2016, Neural Machine Translation of Rare Words with Subword Units; Hugging Face, Tokenizers docs · Verificato il 2026-09-10
Domande frequenti su Subword
Cosa significa «Subword»?
Unità di tokenizzazione intermedia, più piccola della parola ma più grande del carattere, con cui i modelli scompongono i termini. Permette di rappresentare parole rare o mai viste componendole da frammenti noti, limitando il vocabolario e i token fuori dizionario. Algoritmi diffusi sono BPE, WordPiece e SentencePiece.
A quale glossario appartiene «Subword»?
«Subword» fa parte del glossario NLP e LLM, nella categoria Intelligenza Artificiale di Glossario Italiano.