स्टोकेस्टिक ग्रेडिएंट डिसेंट
एक पुनरावृत्तिमूलक अनुकूलन एल्गोरिदम जो डेटा के यादृच्छिक मिनी-बैच पर गणना की गई ग्रेडिएंट का उपयोग करके मॉडल पैरामीटर को अपडेट करता है। SGD गहन शिक्षण प्रशिक्षण की नींव है। मोमेंटम, अनुकूली शिक्षण दर (Adam, RMSProp), और शिक्षण दर शेड्यूलिंग वेरिएंट अभिसरण में सुधार करते हैं। रोबोट शिक्षण में, प्रदर्शन डेटासेट पर मिनी-बैच ग्रेडिएंट डिसेंट अनुकरण शिक्षण नीतियों को प्रशिक्षित करता है।







