ZHAOoops/AI-Notes

What it solves

学习AI算法时，很多资料要么只有数学公式、要么只给代码，缺少把两者串起来的直观讲解。这个项目把作者视频课程中的幻灯片（PPTX可编辑版和PDF版）公开出来，让学习者能对照数学原理、图示和代码逐步理解，也能直接下载用于组会汇报或教学。

How it works

仓库按主题分文件夹存放课件，每个课件对应一个Bilibili视频链接，并提供PPTX和PDF两种格式。目前涵盖两大块：

• 大模型基础：包括Attention、RoPE旋转位置编码、KV Cache、DeepSeek的稀疏注意力（DSA/NSA）、LoRA微调（低秩近似、反向传播、初始化策略），以及信息论基础（熵与KL散度）和残差连接相关扩展。
• 强化学习：从零开始讲Q-Learning，接着是DQN、Policy Gradient、Actor-Critic、TRPO（含共轭梯度数学）、PPO（含SB3代码解读）、GAE，最后到RLHF。

使用方式很简单：在线学习时直接查看PDF（GitHub支持预览），需要修改课件时下载PPTX源文件即可。

Who it’s for

• 正在学习大模型和强化学习的学生或研究者，希望看到完整数学推导和对应代码实现。
• 需要制作组会汇报或教学材料的老师和工程师，可以基于PPTX二次修改。
• 喜欢通过视频+幻灯片结合学习的人，视频由作者在Bilibili发布，配套这里提供的课件。

Highlights

• 每个主题同时提供可编辑的PPTX和高清PDF，兼顾修改与阅读。
• 覆盖面广：从Transformer核心组件到DeepSeek前沿技术，从经典Q-Learning到PPO/RLHF。
• 强调“数学原理→代码实战”的完整链路，图解和推导配套。
• 遵循CC BY-NC 4.0协议，引用时标明出处即可使用。