חזרה לGlossary

הדרכה בדיוק מעורב

MLTraining

הדרכה של רשתות עצביות באמצעות תערובת של חשבון נקודה צפה 16-bit (FP16 או BF16) ו-32-bit (FP32) כדי להפחית שימוש בזיכרון ולהגביר את התפוקה תוך שמירה על יציבות הדרכה. דיוק מעורב הוא סטנדרט להדרכה של מודלי לימוד רובוטי גדולים על GPUs — הוא בערך חוצה את צריכת הזיכרון ומכפיל את התפוקה בהשוואה להדרכה מלאה של FP32.

Related terms