Subword regularization
Verificato
Aggiornato il 10/09/2026
Significato di «Subword regularization»
Tecnica introdotta da Kudo (2018) che, invece di usare una segmentazione fissa in subword, campiona a ogni passo di addestramento una delle molte tokenizzazioni possibili di una parola, in genere con un modello unigram. Questa variabilita rende il modello più robusto al rumore ed e implementata in SentencePiece.
Fonti: Kudo 2018 (arXiv:1804.10959); SentencePiece documentation · Verificato il 2026-09-10
Domande frequenti su Subword regularization
Cosa significa «Subword regularization»?
Tecnica introdotta da Kudo (2018) che, invece di usare una segmentazione fissa in subword, campiona a ogni passo di addestramento una delle molte tokenizzazioni possibili di una parola, in genere con un modello unigram. Questa variabilita rende il modello più robusto al rumore ed e implementata in SentencePiece.
A quale glossario appartiene «Subword regularization»?
«Subword regularization» fa parte del glossario NLP e LLM, nella categoria Intelligenza Artificiale di Glossario Italiano.