Similar Tracks
7. Условия оптимальности. Субдифференциальная форма. Задачи с ограничениями равенствами. МФТИ 2024
Даня Меркулов
20. Двойственные методы: градиентный подъем (!), метод модиф. функции Лагранжа, ADMM. ФКН.2024
Даня Меркулов
19. Обучение больших моделей. Warmup. DDP. Gpipe. LoRA. ZeRO. Идея квантизации. ФКН.2024
Даня Меркулов
3. Автоматическое дифференцирование. Forward mode, reverse mode, SVD, NN backpropagation. МФТИ 2024
Даня Меркулов
4. Выпуклые множества. Выпуклые функции. Выпуклые оболочки, конусы. Сумма Минковского. МФТИ 2024
Даня Меркулов
11. Двойственность в линейном программировании. Анализ Чувствительности. MaxFlow-MinCut. МФТИ 2024
Даня Меркулов
16. Метод стохастического градиентного спуска. Минимизация конечных сумм. Батч. Эпоха. ФКН. 2024
Даня Меркулов