Обратное распространение ошибки

Как нейросети учатся — цепное правило, вычисление градиентов, обратное распространение.

Цепное правило (Chain Rule)

[TODO: Производная сложной функции, интуиция для нейросетей]

Forward Pass

[TODO: Прямой проход — вычисление выхода сети, промежуточные значения]

Backward Pass

[TODO: Обратный проход — вычисление градиентов для каждого веса]

Граф вычислений

[TODO: DAG (Directed Acyclic Graph), автодифференцирование, PyTorch/TensorFlow]

Проверьте себя

[TODO: 2-3 вопроса для самопроверки]

Дополнительные ресурсы

[TODO: Ссылки на материалы для углублённого изучения]