Gradienti Attraverso uno Strato Lineare

Calcolo multivariabile dai primi principi

Uno strato lineare fa passare un vettore di input x attraverso una matrice di pesi W, poi aggiunge un bias b (con il bias la mappa è tecnicamente affine, lineare più uno spostamento, anche se nel ML si chiama comunque strato lineare). Il calcolo in avanti è breve: z = Wx + b. L'addestramento ha bisogno anche del calcolo inverso, per scoprire come cambia la loss al variare di ogni input, ogni peso e ogni bias.

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Gradienti Attraverso uno Strato Lineare
← Grafi di CalcoloSoftmax Stabile e Log-Sum-Exp →