news 2026/4/15 11:58:52

这是一份动手学深度学习笔记!(附学习资料)

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
这是一份动手学深度学习笔记!(附学习资料)

如果你正在学习深度学习,肯定听说过李沐老师的动手学深度学习,这是公认的经典之作

这一期主要是给大家总结这个教程的大纲内容

并给大家分享电子pdf、完整的教程视频、配套的课件源码以及学习笔记(如下图)

需要的兄弟可以按照这个图的方式免费获取


第一章:引言和预备知识

机器学习研究计算机系统如何利用经验(通常是数据)来提高特定任务的性能。它结合了统计学、数据挖掘和优化的思想。通常,它是被用作实现人工智能解决方案的一种手段,深度学习不仅取代了传统机器学习的浅层模型,而且取代了劳动密集型的特征工程

第二章:线性神经网络

这一部分先介绍线性回归模型,线性回归是比较简单的线性模型,用pytorch直接手搓线性回归模型,然后介绍softmax回归函数,应用于图像分类数据集,最后从零开始手搓softmax回归

第三章:多层感知机

这一部分先介绍多层感知机的原理,以及从零开始实现多层感知机,然后介绍模型选择,欠拟合和过拟合的问题,权重衰减和dropout的技巧,前向传播,反向传播和计算图模型,介绍一些数值稳定性,模型初始化,分布偏移,最后以kaggle比赛预测房价收尾


第四章:深度学习计算

这一部分先介绍神经网络的层和块,然后介绍参数管理,比如参数访问,参数初始化,参数绑定,然后介绍延后初始化,自定义参数/不带参数的网络层,读写文件,最后是张量与GPU,神经网络与GPU的介绍


第五章:卷积神经网络

这一部分先介绍卷积神经网络的结构,从全连接层到卷积,图像卷积,介绍填充和步幅,然后介绍多输入多输出通道,汇聚层,然后介绍现在常见的CNN的变体,比如VGG, GoogLeNet, ResNet, DenseNet等


第六章:循环神经网络

这一部分先介绍时间序列模型,然后是文本预处理,从零开始实现循环神经网络,然后介绍循环神经网络的变体,包括LSTM和GRU模型,双向循环神经网络,编解码器结构,序列到序列模型等


第七章:注意力机制

这一部分先介绍注意力的概念,注意力机制是深度学习中一个重要创新,这里的注意力机制包括Bahdanau注意力,多头注意力,以及自注意力,在transformer模型中引入了自注意力,交叉注意力和位置编码,引入注意力会增加计算量,但往往都有精度提升


第八章:优化算法

这一部分先介绍优化和深度学习,其次介绍凸函数,梯度下降算法,随机梯度下降,小批量随机梯度下降,动量法,AdaGrad算法,RMSProp算法,Adam优化器等


第九章:计算性能

这一部分先介绍编译器和解释器的概念,异步计算,自动并行,以及相应的硬件的支持,多GPU卡的训练,多GPU的简洁实现,参数服务器等内容


第十章:计算机视觉

这一部分先介绍计算机视觉中的图像增广,模型微调,目标检测和边界框,以及多尺度目标检测算法,目标检测的数据集,单发多框检测SSD,语义分割和数据集,全卷积神经网络,最后介绍kaggle比赛图像分类和狗的品种识别任务


第十一章:自然语言处理

这一部分先介绍词嵌入,预训练模型word2vec, 全局向量的词嵌入Glove,词的相似性和类比任务,以及Bert模型,预训练Bert, 然后介绍情感分析及数据集,使用循环神经网络和卷积神经网络做情感分析,使用注意力做自然语言推断,最后是微调Bert模型的任务

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/15 11:56:36

刷题日记day8(图论拓扑关系)

简介 本篇介绍两道有关拓扑排序的问题,难度为洛谷黄题 前置知识 拓扑排序就是一系列有不同优先级的事件的排列,其中优先级相同的事情可以相互交换 关键结论一个图能进行拓扑排序的充要条件是它是一个有向无环图(DAG) 入度和出度的概念 1.入度&#xf…

作者头像 李华
网站建设 2026/4/14 22:49:25

开源赋能+技术深耕:AgentRun Sandbox SDK 重塑智能体开发新范式

在大模型技术飞速迭代的今天,智能体(Agent)已经从概念走向实际应用,成为连接技术与场景的核心桥梁。无论是数据分析、网页交互还是复杂任务自动化,智能体都在展现出强大的潜力。但对于广大开发者而言,智能体…

作者头像 李华
网站建设 2026/4/15 11:57:54

CentOS9安装Docker

要在 CentOS 9 上安装 Docker,你可以通过添加官方 Docker 仓库的方式来简化安装过程。 步骤 1: 安装必要的软件包 首先,你需要安装一些必要的软件包,以便能够添加新的仓库并管理软件包。 sudo dnf install -y yum-utils device-mapper-persi…

作者头像 李华
网站建设 2026/4/14 10:27:18

告别频繁校准,效率成本双拿捏!这款MEMS寻北仪刷新行业新体验

在巷道掘进、管线测绘、地质勘探等精密工程作业中,MEMS寻北仪的测量稳定性与运维便捷性,直接决定了项目的推进效率与综合成本。传统寻北设备因机械结构局限,不仅需要频繁停机校准,还常因元件磨损、环境干扰引发参数漂移&#xff0…

作者头像 李华
网站建设 2026/4/14 23:38:10

汇编指令在不同架构中的联系与区别

汇编指令在不同架构中的联系与区别 一、核心联系(共性)基本概念相同 都是对CPU的直接控制都包含数据移动、算术运算、逻辑运算、控制转移等基本操作都涉及寄存器、内存、I/O等硬件资源操作层次定位相同 都处于软件-硬件交界层都是一对一地映射到机器指令…

作者头像 李华