Cách các mô hình thực sự học, từ gradient descent thuần túy đến Adam
Adam kết hợp hai ý tưởng: momentum cho gradient trung bình, và chia tỷ lệ kiểu RMSProp cho bình phương gradient trung bình. Sau đó nó điều chỉnh độ lệch ban đầu vì các trung bình trượt đó bắt đầu từ 0.
🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.
▶ Adam