分清三个动作:相加、搬位置、相乘求和
用矩阵做运算,把一组数变成另一组数。
25–35分钟
学完这章,你能
- 核对矩阵运算与转置
- 逐行算出矩阵乘向量的结果
- 观察特殊矩阵怎样改变空间
先从两个数的加法、乘法开始。每次只追踪一行或一列,动画会带你核对数字从哪里来、算到哪里去。
上篇会读行和列,这次跟着数字看运算。先用默认示例;不同标签有各自的数据,切换后先看面板里的数。
形状相同,按对应位置相加;各格独立计算。
矩阵相加对应位置相加
左侧 A A2 × 2
点选数值查看含义,↑↓ 微调
+右侧 B B2 × 2
点选数值查看含义,↑↓ 微调
=
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
形状相同,按对应位置相减;先看同一行、同一列的两个数。
矩阵相减对应位置相减
左侧 A A2 × 2
点选数值查看含义,↑↓ 微调
−右侧 B B2 × 2
点选数值查看含义,↑↓ 微调
=
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
矩阵的每一格都乘同一个标量,形状保持不变。
矩阵乘标量每格乘同一个数
左侧 A A2 × 2
点选数值查看含义,↑↓ 微调
×标量 k k()
一个数,没有行列轴;shape=()。
=
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
第 i 行第 j 列,移到第 j 行第 i 列;2×3 变为3×2。数字只换位置,不做乘法。
原矩阵 A A2 × 3
点选数值查看含义,↑↓ 微调
→转置 Aᵀ Aᵀ3 × 2只读
行列索引从 1 开始
2 行 3 列 → 3 行 2 列;点击播放,跟踪每个数字的新位置。
左边一行与右边一列做点积。中间尺寸必须一致;矩阵乘法通常不能交换顺序。
矩阵乘矩阵一行 × 一列
左侧 A A2 × 2
点选数值查看含义,↑↓ 微调
×右侧 B B2 × 2
点选数值查看含义,↑↓ 微调
=
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
每次只追踪一个格子
- 相加 左上角1加2,写回结果左上角,得到3。
- 转置 切到“转置”,点三次“前进一格”。原来第一行第三列的3,搬到第三行第一列,数值仍是3。
- 矩阵乘法 左边第一行与右边第一列配对:1乘2、2乘1,相加得4,写入结果第一行第一列。
再点“交换A与B的顺序”,观察结果变化。转置只换位置;矩阵乘法会重新计算数值,而且通常不能交换顺序。
运算对形状有什么要求?
相加、相减要求行列数对应一致;数乘对每一格用同一个倍数,形状不变。
转置交换行列。乘法要求“左边列数=右边行数”;结果的行数来自左边,列数来自右边。下一节用购买数量具体核对。
本节小结
你已分清对应计算、交换位置、一行配一列。知道当前是哪种动作,比一次背完所有运算规则更有用。
苹果每个3元,面包每个4元。输入买多少,矩阵的第一行算件数,第二行算金额。
第一行算总件数,第二行算总金额:每行与购买数量对应相乘,再相加。
购买数量 → 总件数与总金额一行 × 一列
换算矩阵 A A2 × 2
点选数值查看含义,↑↓ 微调
×购买数量 v v2 × 1
点选数值查看含义,↑↓ 微调
=件数与金额 Av Av2 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
算一单,再多买一个苹果
- 默认数量 买2个苹果、1个面包。第一行得3件;第二行算6加4,得10元。
- 只改苹果数量 将购买数量第一格从2改成3,再播放。输出应变成4件、13元。
这就叫映射:按约定的规则,把购买数量变成另一组有含义的数字。一行生成一个输出;不要给每个输入单独算一套规则。
再加一种商品:三个输入,也能只输出两个数
牛奶每盒2元,再买3盒。下图三列依次对应苹果、面包、牛奶;两行仍分别算件数和金额。
加一种牛奶:三个数量,两个结果一行 × 一列
每行一种换算规则 A2 × 3
点选数值查看含义,↑↓ 微调
×苹果、面包、牛奶数量 q3 × 1
点选数值查看含义,↑↓ 微调
=总件数、总金额 r2 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
默认结果是6件、16元。只把牛奶数量3改成4,结果应是7件、18元。
这次左边是2行3列,输入有3个数,输出仍只有2个数。输入长度要与矩阵列数对应;输出长度由矩阵行数决定。
这一小步,你做到了
你已经把矩阵乘法用在一张小账单上:同一组数量,按不同的行组合成件数与金额。 数字的来源和输出的用途,都能逐行解释。
先切到“单位阵I”,用2和1作输入,再换其他预设。每次先核对分量怎样配对、形状怎样变化、每一行生成什么结果,再看几何图。单位阵、零矩阵等保持固定,方便比较。
只有1行1列,仍是矩阵;作用于一维输入时,相当于乘一个数。这里把2映为6。
1×1 矩阵 · 每行组合成一个新坐标一行 × 一列
变换矩阵 A A1 × 1
点选数值查看含义,↑↓ 微调
×输入向量 v v1 × 1
点选数值查看含义,↑↓ 微调
=输出向量 Av Av1 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
主对角线为1,其余为0。Iv = v:每个输入都保持原样。
单位阵 I · 每行组合成一个新坐标一行 × 一列
变换矩阵 A A2 × 2只读
行列索引从 1 开始
×输入向量 v v2 × 1
点选数值查看含义,↑↓ 微调
=输出向量 Av Av2 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
几何含义
输入空间 · 向量 v输出空间 · 向量 Av (2, 1) → (2, 1)
所有元素为0,所有输入都映到零向量;原来的方向和长度信息丢失。
零矩阵 O · 每行组合成一个新坐标一行 × 一列
变换矩阵 A A2 × 2只读
行列索引从 1 开始
×输入向量 v v2 × 1
点选数值查看含义,↑↓ 微调
=输出向量 Av Av2 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
几何含义
输入空间 · 向量 v输出空间 · 向量 Av (2, 1) → (0, 0)
非主对角线都是0;各坐标独立缩放,这里横向2倍、纵向3倍。
对角矩阵 · 每行组合成一个新坐标一行 × 一列
变换矩阵 A A2 × 2只读
行列索引从 1 开始
×输入向量 v v2 × 1
点选数值查看含义,↑↓ 微调
=输出向量 Av Av2 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
几何含义
输入空间 · 向量 v输出空间 · 向量 Av (2, 1) → (4, 3)
这个二维旋转矩阵把向量逆时针转90°,保持长度与夹角;它也是一种正交矩阵。
旋转矩阵 · 每行组合成一个新坐标一行 × 一列
变换矩阵 A A2 × 2只读
行列索引从 1 开始
×输入向量 v v2 × 1
点选数值查看含义,↑↓ 微调
=输出向量 Av Av2 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
几何含义
输入空间 · 向量 v输出空间 · 向量 Av (2, 1) → (-1, 2)
先看保留,再看清零
- 单位阵I 默认输入的2和1原样保留。再改输入,它仍保持原值;不是把所有格子都填1。
- 零矩阵O 输出的两个数都变成0。再换输入,输出仍是零向量。
1×1、对角与旋转矩阵,继续观察
- 1×1矩阵 只有一个格子;默认3乘2得到6,作用像一维数乘。
- 对角矩阵 各坐标独立缩放:默认横向乘2、纵向乘3。
- 旋转矩阵 默认把向量逆时针转90°,保持长度;播放几何变化,跟踪同一个终点。
矩阵每一行,生成一个有含义的输出。
默认买2个苹果、1个面包。第一行算3件,第二行算10元;两行处理同一组数量。这里与前面面板各自操作。
第一行算总件数,第二行算总金额:每行与购买数量对应相乘,再相加。
购买数量 → 总件数与总金额一行 × 一列
换算矩阵 A A2 × 2
点选数值查看含义,↑↓ 微调
×购买数量 v v2 × 1
点选数值查看含义,↑↓ 微调
=件数与金额 Av Av2 × 1只读
行列索引从 1 开始
矩阵较宽,可以左右滑动查看完整数字。
输入和权重的数字可以直接修改。点击结果中的格子切换计算;点击下方某一项可重看它。
带着这个本领继续
用在哪:把一组输入组合成多个结果。乘法先核对形状,再逐行计算;转置只搬位置,单位阵保持输入,零矩阵输出零向量。
再试一处:只把购买数量的第一格从2改成3,再播放计算,结果应是4件、13元。多一个苹果,件数加1、金额加3;把第一格改回2可恢复。
回到本章实验 · 继续:向量到张量与PyTorch基础
按需查参考资料,先找这次遇到的那一部分。