Building makemore Part 3: Activations & Gradients, BatchNorm

摘要

深入探討多層感知機的前向傳播激活值與反向傳播梯度統計，並介紹 BatchNorm 等現代技術以解決深度網路訓練不穩定的問題。觀眾可學習如何診斷並最佳化深度神經網路的健康狀況。

This video explores MLP internals, activation statistics, gradients, and introduces BatchNorm for training deep neural networks.

這筆內容還沒有取得字幕或內文，這段摘要只根據標題與說明欄產生，可能不夠準確；實際內容請以原站為準。

提到的工具與公司

• BatchNorm

適合誰看

具備機器學習基礎、正在學習或實作深度神經網路的開發者。

摘要依據

講者

Andrej Karpathy

依據

標題與說明欄（還沒有取得字幕或內文）

為什麼排在這裡

人氣

0.68

新鮮

0.00

在主題頁與搜尋結果裡，名次由相關、人氣、新鮮三個分數決定；這一頁沒有搜尋的關鍵字，所以沒有相關分數。排序怎麼算

相關內容

• Building makemore Part 4: Becoming a Backprop Ninja影片 ・ Andrej Karpathy ・ 1 小時 55 分
• Stanford CS229 Machine Learning | Spring 2026 | Lecture 7: Neural Networks 1 (Architecture)影片 ・ Stanford Online ・ 1 小時 20 分
• Stanford CS229 Machine Learning | Spring 2026 | Lecture 8: Neural Networks 2 (Backprop)影片 ・ Stanford Online ・ 1 小時 2 分
• Machine Learning Foundations/Techniques: Deep Learning Activation影片 ・ Hsuan-Tien Lin ・ 2 小時 1 分
• 【舊影片上傳】DNN Backpropagation (2015 年上課錄影)影片 ・ Hung-yi Lee ・ 31 分鐘
• Machine Learning Foundations/Techniques: Gradient Boosting / Deep Learning影片 ・ Hsuan-Tien Lin ・ 1 小時 58 分