अवकलज

प्रथम सिद्धांतों से एक-चर कलन

अवकलज एक सवाल का जवाब देता है: एक क्षण में फलन कितनी तेज़ी से बदल रहा है? ज्यामितीय रूप से, यह एक बिंदु पर वक्र की ढाल है, उस स्पर्श रेखा की ढाल जो वक्र को वहाँ बस चूमती है।

चलती कार में स्पीडोमीटर के बारे में सोचें। एक घंटे में आपकी औसत गति कुल समय से विभाजित कुल दूरी है, लेकिन सुई कुछ तेज दिखाती है: ठीक इस पल आप कितनी तेजी से जा रहे हैं। अवकलज वह सुई है, एक अंतराल में फैले होने के बजाय एक ही क्षण में जमी हुई परिवर्तन की दर।

लेकिन यहाँ पहेली है। ढाल को दो बिंदु चाहिए: चढ़ाई भाग दौड़। एकल बिंदु से मापने के लिए कोई जगह नहीं। तो एक अकेला बिंदु ढाल कैसे रख सकता है? तरकीब है इसके पास पहुँचना।

ML में इसका स्थानवह ग्रेडिएंट जो हर तंत्रिका नेटवर्क को प्रशिक्षित करता है ठीक यही अवकलज है, हानि पर लागू। राशि ∂L/∂w एक भार w को धकेलने पर हानि की ढाल है: इसका चिह्न बताता है कौन-सी दिशा हानि घटाती है, और इसका परिमाण बताता है हानि उस भार के प्रति कितनी संवेदनशील है। प्रशिक्षण बस: यह सीमा मूल्यांकन करें (एक autograd इंजन आपके लिए सटीक रूप से करता है — कोई h सिकोड़ना ज़रूरी नहीं), फिर भार को नीचे की ढाल दिशा में…
▶ अवकलज
← सांतत्यअवकलनीयता →