Gradient Checkpointing
Verificato
Aggiornato il 10/09/2026
Significato di «Gradient Checkpointing»
Checkpoint del gradiente. Tecnica di risparmio di memoria che durante il forward conserva solo alcune attivazioni e ricalcola le altre nel passo di backpropagation, invece di memorizzarle tutte. Aumenta il costo di calcolo in cambio di meno memoria, permettendo di addestrare reti più grandi o batch maggiori.
Fonti: Chen et al., Training Deep Nets with Sublinear Memory Cost (2016, arXiv:1604.06174); PyTorch docs, torch.utils.checkpoint · Verificato il 2026-09-10
Domande frequenti su Gradient Checkpointing
Cosa significa «Gradient Checkpointing»?
Checkpoint del gradiente. Tecnica di risparmio di memoria che durante il forward conserva solo alcune attivazioni e ricalcola le altre nel passo di backpropagation, invece di memorizzarle tutte. Aumenta il costo di calcolo in cambio di meno memoria, permettendo di addestrare reti più grandi o batch maggiori.
A quale glossario appartiene «Gradient Checkpointing»?
«Gradient Checkpointing» fa parte del glossario Deep Learning, nella categoria Intelligenza Artificiale di Glossario Italiano.