AI 2026.04.28 · 12 min
Advanced Regularization Theory Deep Dive · 7
Regularization의 4축 — 33개 기법을 하나의 틀로
SWA의 iterate 평균부터 SAM의 worst-case minimax, AdamW의 decoupled weight decay까지, 현대 regularization 기법들이 Prior·Ensemble·Landscape·Invariance 4축 위에서 어떻게 통합되는지 추적한다.