Adam अनुकूलक
एक अनुकूली शिक्षण दर अनुकूलन एल्गोरिदम जो प्रवणता के प्रति-पैरामीटर प्रथम और द्वितीय क्षण अनुमान बनाए रखता है। Adam AdaGrad (प्रति-पैरामीटर शिक्षण दर) और RMSProp (वर्गित प्रवणता का घातीय गतिशील औसत) के लाभों को जोड़ता है। यह रोबोट सीखने के अधिकांश मॉडलों को प्रशिक्षित करने के लिए डिफ़ॉल्ट अनुकूलक है, AdamW (विघटित भार क्षय) सबसे सामान्य वेरिएंट है।







