Скорость обучения

Как модели на самом деле обучаются — от обычного градиентного спуска до Adam

Скорость обучения — это размер шага градиентного спуска. Градиент показывает, в какую сторону потеря растёт быстрее всего; оптимизатор движется в противоположную сторону. Скорость обучения η определяет, насколько далеко он сдвигается.

🔒 This is a Pro lesson — the interactive figure, worked examples, quiz and practice open with Pro access.

▶ Скорость обучения
← Зачем нужна оптимизация в ML?Расписания и прогрев →