Diferenças Finitas e Verificação de Gradiente

Cálculo multivariável a partir dos primeiros princípios

A diferenciação automática consegue calcular milhões de derivadas num único backward pass, mas um único erro numa operação personalizada pode, silenciosamente, enviar o gradiente errado por todo o teu modelo. Uma verificação de gradiente apanha esse erro com uma diferença finita: dá um pequeno passo de distância h para cada lado do ponto que te interessa, lê quanto a função mudou, e trata o declive dessa reta secante curta como uma estimativa independente do verdadeiro declive tangente.

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Diferenças Finitas e Verificação de Gradiente
← Softmax Estável e Log-Sum-ExpPontos Críticos em Rⁿ →