Skip to content

延伸資源 — micrograd

官方資源

相關論文

  • Learning Internal Representations by Error Propagation (Rumelhart et al., 1986) — 反向傳播的原始論文
  • Automatic Differentiation in Machine Learning: A Survey (Baydin et al., 2018) — 自動微分的綜述
  • Attention Is All You Need (Vaswani et al., 2017) — Transformer 架構(microgpt 的基礎)

延伸閱讀

其他微型 autograd 專案

  • autograd — 更完整的純 Python autograd
  • tinygrad — 比 micrograd 大一些,但更接近 PyTorch API

下一步

完成 micrograd 後,建議進入 Phase 2: microgpt