ЮФУ -- 2026.02.26 -- Стохастический градиентный спуск

Это лекция из курса "Введение в глубокое обучение", который читается в Южном федеральном университете весной 2026 года. Все материалы этой и других лекций курса (слайды, доска, ноутбуки с кодом) размещены по адресу: https://www.sergeynikolenko.ru/courses/sfudl-2026 Подписывайтесь на мой телеграм-канал "Sineкура": Разделы: 00:00 Что такой (стохастический) градиентный спуск 29:50 Плохие примеры для SGD 39:26 Метод моментов и моменты Нестерова 01:00:00 Адаптивные варианты SGD: AdaGrad, RMSprop, Adam