Градиенти през линеен слой

Многопроменливо смятане от първи принципи

Линейният слой изпраща входен вектор x през матрица на теглата W, после добавя отместване (bias) b (с отместването изображението технически е афинно, линейно плюс отместване, но в машинното обучение навсякъде го наричат линеен слой). Правото преминаване е кратко: z = Wx + b. Обучението се нуждае и от обратното изчисление – да намери как загубата се променя с всеки вход, всяко тегло и всяко отместване.

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Градиенти през линеен слой
← Изчислителни графовеСтабилен Softmax и Log-Sum-Exp →