Địa hình hàm mất mát

Cách các mô hình thực sự học, từ gradient descent thuần túy đến Adam

Địa hình hàm mất mát là hình dạng của L(θ) trên không gian tham số. Với các mạng nơ-ron nó có số chiều cao và không lồi: nó có những đoạn phẳng rộng, những đoạn cong mạnh, các điểm yên ngựa leo lên theo một số hướng trong khi rơi xuống theo các hướng khác, và nhiều vùng mất mát thấp riêng biệt mà thường hóa ra lại được kết nối với nhau.

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Địa hình hàm mất mát
← Các phương pháp bậc haiChẩn đoán bộ tối ưu hóa →