速通深度学习数学基础

图书标准信息

• 作者 卢菁
• 出版社 电子工业出版社
• 出版时间 2023-01
• 版次 1
• ISBN 9787121447808
• 定价 79.00元
• 装帧 其他
• 开本 16开
• 页数 196页
• 字数 236千字

【内容简介】

本书以线性代数、微积分、概率论为逻辑主线，讲解了与深度学习有关的大部分数学内容。本书以理论结合实际的方式讲解，使数学知识不再是冰冷的公式堆砌，而变成一个个真实的案例，同时对案例背后的原理进行理论上的升华，希望达到一通百通的效果。读者通过阅读本书，不仅能够提升阅读学术论文中的数学公式的能力，还能加深对深度学习本身的理解。 本书面向入门级读者，摒弃复杂的数学推导和证明，重视逻辑推理和简单的表达，特别适合数学基础不足的读者阅读。

【作者简介】

2003年~2012年年就读于北京科技大学本科硕士博士，2016年于北京大学博士后流动站出站，研究方向为：机器学习，人工智能，计算机视觉和自然语言属于。工作于腾讯，爱奇艺等顶级互联网公司从事人工智能技术的应用研发工作。曾获得腾讯年度人工智能铜奖，所做项目涉及自然语言处理，推荐系统，领导团队参与多项公司级项目的搭建和优化。工作之余，一直和培训机构进行合作，主讲人工智能课程，致力于人工智能在中国的普及推广和应用。

【目录】

目　　录

第1章　线性代数的基本概念1

1.1　向量和深度学习1

1.2　向量距离计算7

1.3　向量的基本性质11

1.3.1　向量的基本运算11

1.3.2　线性相关和线性无关14

1.3.3　向量的投影和正交15

1.4　矩阵18

1.4.1　矩阵的基本概念18

1.4.2　矩阵和神经网络26

1.4.3　矩阵的秩28

1.5　一些特殊的矩阵30

1.5.1　矩阵的逆和广义逆30

1.5.2　正交矩阵32

第2章　线性代数在深度学习中的应用34

2.1　特征值和特征向量34

2.1.1　特征值和特征向量的定义34

2.1.2　一般矩阵的特征分解37

2.1.3　对称矩阵的特征分解38

2.2　奇异值分解41

2.3　正定矩阵45

2.4　矩阵的范数和神经网络46

2.5　主成分分析49

2.6　推荐系统中的矩阵分解55

第3章　微积分的基本概念59

3.1　导数的定义和几何意义59

3.2　复杂函数求导61

3.3　导数的存在性64

3.4　多元函数求导65

3.5　二阶导数和高阶导数65

3.6　函数的极大值和极小值69

3.6.1　一元函数的极大值和极小值69

3.6.2　多元函数的凹凸性和海森矩阵72

3.6.3　凸优化证明73

第4章　微积分在深度学习中的应用77

4.1　梯度下降法77

4.1.1　梯度下降法在深度学习中的应用77

4.1.2　泰勒公式和梯度下降法80

4.1.3　牛顿迭代法81

4.2　梯度下降法的缺点84

4.3　矩阵求导术88

4.3.1　标量对向量和矩阵求导88

4.3.2　向量对向量求导89

4.3.3　链式法则91

4.4　常见激活函数及其导数92

4.5　常见损失函数及其导数99

4.5.1　分类和回归99

4.5.2　哈夫曼树和负采样103

4.5.3　度量学习106

4.6　积分和求和108

4.6.1　积分和不定积分108

4.6.2　多重积分111

4.6.3　分类模型的效果指标AUC113

第5章　概率的基本概念117

5.1　概率入门117

5.2　联合概率和条件概率119

5.3　贝叶斯定理122

5.4　连续概率分布124

5.5　均值和方差126

5.6　相关性130

5.7　正态分布133

5.7.1　正态分布的基本概念和性质133

5.7.2　正态分布和逻辑回归137

第6章　概率在深度学习中的应用139

6.1　概率分布之间的距离139

6.2　最大似然估计140

6.3　Logit和Softmax143

6.3.1　二分类的Logit143

6.3.2　多分类的Softmax144

6.4　语言模型147

6.5　概率悖论150

6.5.1　辛普森悖论150

6.5.2　基本比率谬误151

6.5.3　罗杰斯现象153

6.5.4　伯克森悖论153

6.6　统计学基础155

6.6.1　卡方分布和学生分布155

6.6.2　假设检验158

6.6.3　AB测试168

6.7　各类散列变换172

6.7.1　特征Hash172

6.7.2　MD5174

6.7.3　特征空间的投影175

6.7.4　simhash177

6.7.5　minhash178

6.8　分类器性能的极限181

6.8.1　最大AUC181

6.8.2　贝叶斯错误率184