线性代数 第 4 章 · 正交性(24 题)
本章速览
4 篇 · 24 题:四大子空间的正交性(4-1,7 题)、投影与投影矩阵(4-2,7 题)、最小二乘(4-3,5 题)、标准正交基与 Gram–Schmidt(4-4,5 题)。
4-1 四大子空间的正交性(7 题)
| 题号 | 结论 |
|---|---|
| 基础 1 | ;平面 |
| 基础 2 | 四空间维数 ;两个直和成立 |
| 进阶 3 | ();() |
| 进阶 4 | 、; |
| 思考 5、6、7 | 见解析 |
基础题 1 (求正交补)
解
第 1 步:设方程。 ⟺ 与两个生成向量都正交:
第 2 步:解。 、,取 :
第 3 步:平面方程。 法向量即 :
答案 基 ,;平面 。
易错点 ① 把 算成三维(忘了 只有两维);② 平面方程漏掉某个系数;③ 法向量与生成向量搞混。
基础题 2 ( 的四大子空间)
解
第 1 步:秩。 两行 、 不成比例 ⇒ 。
第 2 步:四个子空间。
| 子空间 | 所在空间 | 维数 | 基 |
|---|---|---|---|
| (标准基) | |||
| (行) | |||
| (只有零向量) |
第 3 步:验证直和。 、 ⇒ ,维数和 ,故
又 、,故 ✓
答案 如上。
易错点 ① 把 与 混为一谈(一个在 、一个在 );② 忘记 ;③ 用「正交 + 维数和为 」验证直和。
进阶题 3 ( 的分解)
解
第 1 步:维数。 。在 中:、;在 中:、。
第 2 步:两个分解。
第 3 步:正交对象。 中的向量与 正交,而 由 的三个线性无关的行(转置成列)张成。故 的每个向量与 的三个无关行向量都正交(等价地:与 的全部行正交)。
答案 如上。
进阶题 4 (正交分解)
解
第 1 步:单位向量。 。
第 2 步:投影。
第 3 步:正交部分。 ;验算 ✓
第 4 步:勾股。 ;;; ✓
答案 、。
思考题 5 (反对称矩阵)
解
第 1 步:。 它是数,等于自己的转置:
第 2 步:。 取 、,则
(用了 与 。)故 (因 )。
第 3 步:对角元为零。 。
第 4 步:奇数阶不可逆。
答案 ;对角元全为 ;奇数阶 故不可逆。
思考题 6 (正交子空间的维数)
解
第 1 步:交为零。 若 ,则 。故 是直和:
第 2 步:严格小于的例子。 中 、:。
第 3 步:等于 时。 若 ,则 ,故 ;又 且 ,故 。
思考题 7 (法方程必有解)
解
第 1 步:关键结论。 (由 3-5 思考题 5:,且 )。
第 2 步: 的位置。 显然 ,故 。
第 3 步:结论。 存在 使 ,即法方程一定有解(不唯一时由伪逆给最小范数解)。这解释了为什么最小二乘总有解、即使 的列相关。
4-2 投影与投影矩阵(7 题)
| 题号 | 结论 |
|---|---|
| 基础 1 | , |
| 基础 2 | |
| 进阶 3 | 列无关; |
| 进阶 4 | ; |
| 思考 5–7 | 见解析 |
基础题 1 (到直线的投影)
解
第 1 步:系数。 、,故
第 2 步:投影矩阵。 。
第 3 步:验证。 ✓; ✓(投影秩为 )。
答案 、。
基础题 2 (到平面的投影)
解
第 1 步:法向量。 。
第 2 步:用 。 ,故
第 3 步:验算。 坐标和 ✓ 在平面上;残差 与 平行 ✓(正是法向分量)。
答案 。
进阶题 3 (列无关情形)
解
第 1 步:无关性。 两列 、 不成比例 ⇒ 线性无关(故无需找主元列)。
第 2 步:。
第 3 步:投影矩阵。
第 4 步:验证。 (= 列数,因列满秩)✓; 可直接乘验。
答案 列无关; 如上。
进阶题 4 (两个投影之和)
解
第 1 步:写出。 、。
第 2 步:相加。
它对称、幂等(),是投影到 平面()的投影矩阵 ✓
第 3 步:乘积。
答案 (投影到 平面); 成立,但 不成立(两者都为零,恰好交换)。一般两个投影不必交换,本例坐标投影恰好交换。
思考题 5 ( 是反射)
解
第 1 步()。 、:
第 2 步()。 设 、,令 :
第 3 步:几何意义。
即把 关于子空间 做镜面反射: 内分量不变、法向分量反号。
思考题 6 (投影不放大长度)
解
第 1 步:正交分解。 。又
故两部分正交。
第 2 步:勾股。
第 3 步:等号条件。 等号 。
思考题 7 (列满秩投影矩阵的秩与特征值)
解
第 1 步:。 由 得
又 是 、,故 。
第 2 步:()。 是 阶而秩 ⇒ 奇异 ⇒ 。
第 3 步:非零特征值。 是到 维子空间 的正交投影,其特征值为 ( 重,对应 )与 ( 重,对应 )。故非零特征值全为 。
4-3 最小二乘逼近(5 题)
| 题号 | 结论 |
|---|---|
| 练习 1 | 、 |
| 练习 2 | 、、SSE |
| 练习 3 | ;最佳近似就是零 |
| 练习 4 | 三条结论都成立 |
| 练习 5 | 第三列 第二列 ⇒ 必奇异 |
练习 1 (标准最小二乘)
解
第 1 步:法方程。
第 2 步:求解。
第 3 步:投影。
第 4 步:验证正交。 ,
✓
答案 如上。
练习 2 (拟合直线)
解
第 1 步:建模。 ,故
第 2 步:法方程。
第 3 步:求解。 、 ⇒ ,。
第 4 步:残差。 拟合 : 给 (残差 )、 给 (残差 )、 给 (残差 )。故
第 5 步:图像。 直线过 、、:在第一个点上方、第二个点下方、第三个点上方——中间点被「拉低」最多。
答案 、、SSE 。
练习 3 ()
解
第 1 步:。 因 而 由列张成,故 与每列正交。
第 2 步:法方程。 ;由 得
第 3 步:几何意义。 本身已垂直列空间,故它在 上的投影是零向量——「最佳近似」只能是 ,残差就是 本身。
练习 4 (列标准正交)
解
第 1 步:(a) ⇒ 法方程化为 。
第 2 步:(b) 代入投影公式:
第 3 步:(c) ,
(用了 与 。)
练习 5 (共线参数)
解
第 1 步:列的关系。 设计矩阵的三列是 、、,第三列恰为第二列的 倍。
第 2 步: 奇异。 列相关 ⇒ ⇒ (因 )⇒ 法方程不唯一。
第 3 步:真正的参数个数。 只有 个独立参数:
第 4 步:等价参数化。 记 、,则 —— 与 只有组合 可辨识。
答案 第三列 第二列;2 个独立参数;。
4-4 标准正交基与 Gram–Schmidt(5 题)
| 题号 | 结论 |
|---|---|
| 练习 1 | 不是(差 ); 是 |
| 练习 2 | 见解析; |
| 练习 3 | 三条都成立(等距性) |
| 练习 4 | ; |
| 练习 5 | 相减抵消 ⇒ 误差放大;修正 GS 二次正交化 |
练习 1 (三个矩阵的正交性)
解
第 1 步:。 ⇒ 不是正交矩阵(列长 )。
第 2 步:。 ,故 ✓ 正交。
第 3 步:。
✓ 正交(且对称,是反射矩阵)。
答案 正交; 不是。
练习 2 (Gram–Schmidt 与 )
解
第 1 步:。 ,:
第 2 步:。 ,
第 3 步:。 、,
第 4 步:。
第 5 步:对照。 ;而 ✓
答案 如上。
练习 3 (正交变换保距)
解
第 1 步:关键恒等式。 对任意 :。
第 2 步:(a) 取 即得 。
第 3 步:(b) 。
第 4 步:(c) 设 标准正交,令 。由 (b) ,故 仍标准正交;又 可逆, 仍是基。
练习 4 ()
解
第 1 步:幂等与对称。 ,故
第 2 步:迹与秩。 用 :
由 是到 维子空间 的投影,。
练习 5 (经典 GS 的数值弱点)
解
第 1 步:写出第二步。 ,
第 2 步:抵消。 主项 被完全减掉,剩下 量级的小向量。若 几乎平行于 ,则方括号内是「两个几乎相等的向量相减」,灾难性抵消使相对误差被放大到 量级; 的方向因此不可靠, 可能明显偏离 。
第 3 步:修正 GS。 在算出 后再减去它在 上的分量(第二次正交化):
这样把残留的一阶误差再压掉一个量级,使 回到机器精度附近。
答案 如上。