רגולריזציה L2
הוספת עונש פרופורציונלי לגודל בריבוע של משקלי מודל לפונקציית ההפסד, מה שמונע משקלים גדולים ומפחית overfitting. רגולריזציה L2 (weight decay) מיושמת כמעט בכל הדרכת רשת עצבית. בלימוד רובוט, weight decay מתאים מונע מהמדיניות לשנן מסלולי הדגמה ספציפיים.







