一旦有了内积,便可以挑出一类几何上特别简洁的向量族。正交性很有用,
因为它能把坐标方向分开:对一个向量取内积时,所有与它正交的方向都会
被消去。在正交基中,坐标系数因此可以直接由内积读出,不必每次重新解
一个线性系统。
正交集定义中的非零条件不可省略。等式 ⟨0,v⟩=0 虽然成立,
但它不能使零向量成为可用的方向。零向量的范数是零,∥0∥2 不能用作系数公式所要求的非零分母,也不能属于
线性无关的向量族。
正交
定义
正交向量
若向量 v,w∈Rm 满足
⟨v,w⟩=0,则称 v 与 w 正交,记作
v⊥w.
这个定义是代数性的,所以适用于任意维度。在 R2 或
R3 中,它与非零向量垂直的熟悉图像一致。到了更高维度,图像
可能不再有帮助,但内积仍然可以检验同一个关系。
例题
用内积检查正交
令
v=123,w=−1−11.则
⟨v,w⟩=1(−1)+2(−1)+3(1)=0.两个向量都非零,所以它们正交。它们的范数平方分别是 ∥v∥2=14 与
∥w∥2=3;内积为零说明的是方向关系,不是某个向量长度为零。
正交集
定义
正交集
有限集合 S={v1,…,vk} 若满足:
- 集内每个向量都非零;
- 当 i=j 时,vi⊥vj;
则称 S 为 Rm 中的一个 正交集。
这两个条件各有作用。两两内积为零分开不同方向,而非零条件防止零向量
冒充一个方向。若允许零向量,集合 {0,e1} 会满足所有两两内积为零的
等式,却明显线性相关。把零向量加入正交族并不会破坏这些等式,正因为如此
才必须单独写出非零条件。反过来,一个不含零向量的族也不一定正交,例如
⟨e1,e1+e2⟩=1。
定理
非零正交集自动线性无关
若 S={v1,…,vk} 是 Rm 中的正交子集,则 S 线性无关。
特别地,k≤m。
证明
为什么正交集必线性无关
假设有线性关系
α1v1+⋯+αkvk=0.固定一个指标 i,对等式两边取与 vi 的内积。由内积的线性性,
0=⟨j=1∑kαjvj,vi⟩=j=1∑kαj⟨vj,vi⟩.当 j=i 时,正交性使对应内积为零,只剩下
0=αi⟨vi,vi⟩=αi∥vi∥2.因为 vi=0,正定性给出 ∥vi∥2>0,所以 αi=0。指标 i
是任意的,对每个指标重复这个固定指标的检验,就会得到所有系数都为零。
因此线性关系是平凡的,集合线性无关。Rm 中的线性无关子集至多
有 m 个向量。
这个证明也提供一个实用方法:想孤立某个系数,就对携带该系数的向量取内积。
正交性消除交叉项,非零范数让除法合法。
正交集中的坐标
系数公式只适用于目标向量属于正交集的张成空间这一情况。这个成员条件保证
所提出的线性组合确实是目标向量的表示。
定理
正交集中的系数公式
设 S={v1,…,vk} 是正交集,且
v=α1v1+⋯+αkvk.则对每个 i,
αi=∥vi∥2⟨v,vi⟩.因此
v=i=1∑k∥vi∥2⟨v,vi⟩vi.
只要对表示式取与 vi 的内积,交叉项便消失,留下
⟨v,vi⟩=αi∥vi∥2。由于 vi 非零,可以相除。这个公式
是直接读出坐标的方法,并不是张成空间的另一种定义。
定理
加权内积与勾股公式
若 S={v1,…,vk} 是正交集,且
v=i=1∑kαivi,w=i=1∑kβivi,则
⟨v,w⟩=i=1∑kαiβi∥vi∥2.特别地,
∥v∥2=i=1∑kαi2∥vi∥2.
证明
为什么只剩下相同方向
利用内积在两个位置的线性性展开:
⟨v,w⟩=⟨i∑αivi,j∑βjvj⟩=i∑j∑αiβj⟨vi,vj⟩.当 i=j 时,正交性使该项为零;当 i=j 时,该项是
αiβi∥vi∥2。把留下的对角项相加就得到公式。令 w=v 且
βi=αi,便得到范数平方公式。这是一个加权勾股定理:每个坐标
的贡献由对应向量的长度平方加权。
下面的图解集中说明这个机制:两两正交会消除交叉项,所以每个坐标系数都可以
由一个独立的内积计算读出。它也预告为什么把正交基规范化后,权重和分母都会
变成 1。
例题
用内积找坐标并检查范数
令
v1=111,v2=1−10,v3=11−2,x=123.先检查几何关系:
v1⋅v2=0,v1⋅v3=0,v2⋅v3=0,并且
∥v1∥2=3,∥v2∥2=2,∥v3∥2=6.所以这是一个正交集。由于三个向量都非零且两两正交,根据定理它们线性无关。
R3 中的三个线性无关向量构成 R3 的一组基,因此
x∈span{v1,v2,v3}。这就在使用系数公式前核对了成员条件:
α1=∥v1∥2⟨x,v1⟩=36=2,α2=∥v2∥2⟨x,v2⟩=2−1=−21,α3=∥v3∥2⟨x,v3⟩=6−3=−21.代回去检查:
2v1−21v2−21v3=222+−21210+−21−211=123=x.加权范数公式提供另一项检查:
∥x∥2=22(3)+(−21)2(2)+(−21)2(6)=12+21+23=14.
正交基与标准正交基
定义
正交基
设 V 是 Rm 的子空间。若集合 S 同时是 V 的一组基底和正交集,
则称 S 为 V 的 正交基。
由于正交集已经自动线性无关,所以要检查一个正交集是不是正交基,只需要再
检查它是否张成所讨论的子空间。
定理
正交基判准
设 V 是 Rm 的子空间。若 S 是 V 中的正交子集,则 S 是
V 的正交基,当且仅当 S 张成 V。
正向是基底定义的一部分;反向中,张成性补上缺少的条件,而线性无关定理补上
另一个条件。这个判准提醒我们:正交族可以独立,却未必张成整个环境空间。
定义
标准正交基
集合 S={v1,…,vk} 若正交且每个向量的范数都是 1,则称 S 为
标准正交集。等价地,
⟨vi,vj⟩={1,0,i=j,i=j.既是标准正交集又是基底的集合称为 标准正交基。零子空间 {0} 的标准
正交基是空集;任何非空基底仍由非零向量组成。
定理
标准正交基中的坐标公式
若 S={v1,…,vk} 是标准正交集,且
v∈span{v1,…,vk},则
v=⟨v,v1⟩v1+⋯+⟨v,vk⟩vk.若 v=∑iαivi,还满足
∥v∥2=α12+⋯+αk2.
因为每个向量的范数是 1,分母自然消失,加权范数公式也变成坐标平方的普通
和式。
成员条件是公式的一部分
反例模式
系数公式不能产生缺少的分量
在 R2 中取正交集 S={e1},并取环境向量 v=e2。这里
v∈/span{e1},但系数表达式会给出
∥e1∥2⟨e2,e1⟩e1=0=e2.所以只有先确认 v∈span(S),公式才会重建 v。对任意环境向量,
同一个表达式给出 v 在 span(S) 上的正交投影;余向量
r=v−i∑∥vi∥2⟨v,vi⟩vi与每个 vi 正交。这个余向量正是下一节正交化过程要处理的部分。
规范化
定理
规范化正交基
若 S={v1,…,vk} 是正交集,则
S′={∥v1∥v1,…,∥vk∥vk}是标准正交集,而且 span(S′)=span(S)。若 S 是
V 的正交基,则 S′ 是 V 的标准正交基。
每个除数都为正,因为对应向量非零。用非零数缩放向量会保留所有线性组合,因而
保留张成空间;同时
⟨vi/∥vi∥,vj/∥vj∥⟩=0(当 i=j),新向量的范数
都等于 1。规范化不能修复非正交族:(1,0) 与 (1,1) 规范化后的内积仍为
1/2,不是零。
例题
规范化三维正交基
使用坐标例中的正交基,定义
u1=3v1,u2=2v2,u3=6v3.张成空间没有改变,而且规范化后的向量满足 ⟨ui,uj⟩=δij。
对同一个目标向量 x,标准正交坐标现在就是直接内积:
⟨x,u1⟩=23,⟨x,u2⟩=−21,⟨x,u3⟩=−63.因此
x=23u1−21u2−63u3,并且
∥x∥2=(23)2+(−21)2+(−63)2=12+21+23=14.
非零向量、张成性与投影
正交集中的向量线性无关,但未必张成目标空间:{e1} 是正交集,但不能张成 R2。
必须区分“两个向量正交”和“一个集合是正交集”。等式 ⟨v,w⟩=0
允许其中一个向量为零;正交集则要求每个成员都非零。这正是线性无关证明中所用
的条件:对等式与 vi 取内积后,要除以 ∥vi∥2,只有 vi=0 时这
个数才为正。证明从不除以系数,所以即使某些系数本来就是零,证明仍然有效。
系数公式还有一个边界条件。表达式
i∑∥vi∥2⟨v,vi⟩vi
总会给出正交集张成空间中的向量,但只有在 v 属于这个张成空间时,它才等于
给定的 v。对一般向量,这个表达式是正交投影,而剩余向量与每个基方向都正交。
所以成员条件不是装饰性的技术假设;它把投影等式变成了重建等式。
加权公式也说明了标准正交公式为何方便。在正交基中,较长的基向量对范数的贡献
带有权重 ∥vi∥2;在标准正交基中,每个权重都是 1。系数也同时改变:
αi=⟨v,vi⟩/∥vi∥2 变成
αi=⟨v,vi⟩。规范化改变的是坐标的数值表示,不改变向量本身
或其张成空间。
常见错误
跳过张成性或范数检查
不能把标准正交基的系数公式用于仅仅正交的向量族,也不能在未确认分母非零前使用
正交系数公式。对于非单位的正交族,∥vi∥2 分母不可省略;对于不包含目标
向量的张成空间,所得和式只是目标向量的投影。一个好的最后检查是把系数代回线性
组合;在有帮助时,再把加权范数公式所得的数值与直接由坐标计算的范数平方比较。
空集与维数
有限集合的假设使系数论证保持具体,但这个逻辑也能说明边界情况。空集按空真条件
是正交集,其张成空间是零子空间,因此它正是 {0} 的标准正交基。Rm
中的非空正交集至多有 m 个成员;若恰有 m 个成员,它就是整个空间的基底。这里
同时使用了论证的两个部分:内积给出线性无关,而维数相等补上张成性。一个向量族
成为基底后,线性无关性又保证坐标唯一,所以系数公式不是只产生一个方便的展开,
而是确定唯一可能的展开。
快速检查
思考检查
正交集可以包含零向量吗?
用定义回答,不要只看 ⟨0,v⟩=0。
解答 · 答案
思考检查
为什么标准基向量 e1,…,em 彼此正交?
解答 · 答案
若 i=j,则 eiTej=0,因为两个向量中的 1 出现在不同坐标位置。
每个 ei 都非零,所以标准基是正交集。
思考检查
若使用标准正交基,v 展开式中 vi 的系数是多少?
解答 · 答案
只要 v 属于该基底的张成空间,系数就是 ⟨v,vi⟩。
练习
思考检查
证明 {(1,2),(−2,1)} 是 R2 的一组正交基,并核对张成性。
解答 · 引导解答
两向量的内积是
(1,2)⋅(−2,1)=−2+2=0.两个向量都非零,所以正交集定理使它们线性无关。R2 中的两个
线性无关向量构成基底,因而张成 R2。
思考检查
令 u1=(1,2)、u2=(−2,1)、v=(0,5)。求 v 在这组正交基下的系数。
解答 · 引导解答
因为
⟨u1,u2⟩=−2+2=0,∥u1∥2=∥u2∥2=5,这是一组正交向量。对 v=(0,5),
⟨v,u1⟩=10,⟨v,u2⟩=5.所以系数是 10/5=2 与 5/5=1,并且
2(1,2)+(−2,1)=(0,5)=v.
思考检查
把正交基 {(3,4),(4,−3)} 规范化。
解答 · 引导解答
两个向量的范数都等于 5,因此一组标准正交基为
{(53,54),(54,−53)}.
相关笔记
如果内积公式还不熟悉,请先读
9.1 内积、范数与夹角,
因为本节公式都建立在那里的内积与范数定义之上。
之后可继续读
9.3 Gram-Schmidt 正交化,
看看任意基底如何系统地转成正交基。成员条件反例中的余向量,正是那个过程的
第一步投影。
本节的基底语言也依赖
6.5 基底与维数。