第20讲正交投影 教学目的:掌握正交投影算子和正交分解的基本性质 讲解要点: 1投影定理以及投影算子的初步性质。 2投影算子的特征及其运算。 3空间的正交分解。 定义1设H是内积空间,EcH是线性子空间,x∈H.若存 在分解x=x1+x2,其中x1∈E,x2⊥E,则称x1为x在E上的投影 记为Pgx=x1 定理1设H是内积空间,EcH是线性子空间,x∈H,x∈E 则以下诸条件等价 (1)PEx=x (3)v∈E,实变量函数f()=|x-x+|在=0有最小值。 证明()→(2)x有分解x=x1+x2,其中x1∈E,x2⊥E, 则v∈E,x1-∈E,x2⊥x1-2,于是 |x-=|x-+x1|=|-|+|≥|=|x-x 注意到x1∈E,故x-x=infx (2)→(3)注意∫(A)是A的连续函数并且x1-∈E,f(4)在 λ=0的最小性即(42-1)
1 第 20 讲 正交投影 教学目的:掌握正交投影算子和正交分解的基本性质。 讲解要点: 1 投影定理以及投影算子的初步性质。 2 投影算子的特征及其运算。 3 空间的正交分解。 定义 1 设 H 是内积空间, E ⊂ H 是线性子空间, x ∈ H . 若存 在分解 1 2 x = x + x ,其中 x1 ∈ E , x2 ⊥ E ,则称 1 x 为 x 在 E 上的投影, 记为 1 P x x E = . 定理 1 设 H 是内积空间,E ⊂ H 是线性子空间,x∈ H ,x1 ∈ E , 则以下诸条件等价: (1) Px x E = 1 . (2) 1 inf z E x x xz ∈ −= − , (4-2-1) (3)∀ ∈z E , 实变量函数 2 1 f ( ) λ =−+ xx z λ 在 λ = 0 有最小值。 证明 (1) ⇒ (2) x 有分解 1 2 x = x x + ,其中 x1 ∈ E , x2 ⊥ E , 则 ∀ ∈z E , 1 x − ∈z E , 2 1 x ⊥ x z − ,于是 2 2 1 2 x − = −+ z x zx = 2 2 1 2 x − + z x ≥ 2 2 x = 2 1 x − x 注意到 x1 ∈ E ,故 1 inf z E x x xz ∈ −= − 。 (2) ⇒ (3) 注意 f (λ) 是 λ 的连续函数并且 x1 − λz ∈ E , f (λ) 在 λ = 0 的最小性即(4-2-1)
E,取A为实变量 f(0)=lm(2)/0=im-x+2-|x=xf m(x=)+(2x)+) 2Re(x-x1,2) f()在λ=0是可微的.由于=0是最小值点,故Re(x-x,)=0 同样地,将z换为得出Im(x-x2)=0,从而(x-x1,2)=0.∈E是 任意的,最后得出x-x⊥E.故Px=x1 定理2(投影定理)设H是 Hilbert空间,EcH为是线性子空 间,则vx∈H,Px存在且唯一。 证明若x∈E,则Px=x若xE,取xn∈E使得|y-xn (y,E)=d,由于 lrm -x=(x-x,)-(x-xmiI (x-x,+x-x) xn 2 {xn}是 Cauchy序列。不妨设xn→x,E闭,所以x∈E.现在 d 由定理1,Px=x0 由于 Hilbert空间是严格凸的,x是唯一的最佳逼近元。 其实为了得到最佳逼近元,定理2中的集合E可以是任一闭凸子 集,x的存在唯一性结论及其证明都不改变。定理2和定理1还说明 空间一点到闭子空间(闭凸集)的投影,恰恰是这一点关于闭子空间
2 (3) ⇒ (1) ∀z ∈ E ,取 λ 为实变量,则 λ λ λ ( ) (0) (0) lim 0 f f f − ′ = → 2 2 1 1 0 lim x x z xx λ λ → λ −+ −− = = ( ) 2 1 1 0 lim ( , ) ( , ) x x z zx x z λ λ → − + −+ = 2 Re 1 ( ,) x − x z . (4-2-2) f (λ) 在 λ = 0 是可微的. 由于 λ = 0 是最小值点,故 Re 1 ( ,) x − x z =0. 同样地,将 z 换为 iz 得出 Im 1 ( ,) x − x z =0,从而 1 ( ,) x − x z =0. z ∈ E 是 任意的,最后得出 1 x − ⊥ x E . 故 Px x E = 1。 定理 2(投影定理) 设 H 是 Hilbert 空间, E ⊂ H 为是线性子空 间,则 ∀ ∈x H , P xE 存在且唯一。 证明 若 x∈ E ,则 P xE = x .若 x∉ E , 取 xn ∈ E 使得 n y x − → ρ(, ) yE d = ,由于 2 2 ( )( ) mn n m x x xx xx − = − −− = 2 2 2( ) n m xx xx − +− -4 2 2 n m x x x + − ≤ 2( ) 2 2 n m y − x + y − x -4 2 d → 0 , { }n x 是 Cauchy 序列。不妨设 0 x x n → , E 闭,所以 x0 ∈ E . 现在 0 lim n n x x xx d →∞ − = − == inf z E x z ∈ − , 由定理 1, P xE = 0 x 。 由于 Hilbert 空间是严格凸的, 0 x 是唯一的最佳逼近元。 其实为了得到最佳逼近元,定理 2 中的集合 E 可以是任一闭凸子 集, 0 x 的存在唯一性结论及其证明都不改变。定理 2 和定理 1 还说明 空间一点到闭子空间(闭凸集)的投影,恰恰是这一点关于闭子空间
(闭凸集)的最佳逼近元。不仅如此,在 Hilbert空间上我们还可以定 量地计算出一点到最佳逼近元的距离。 例1设H是 Hilbert空间,EcH是线性子空间,dimE=n 1,…,en是E的一组规范正交基,则x∈H,Px=∑(x,e1)并且 d(x,E)=(-∑(x,e片y2 4-2-3) 若{en}是H中的规范正交集,E= span(e, i},则Px=∑(xe并且 d(x,E)=(|-∑(x,e)y2 (4-2-4) 实际上,令x=∑(x,e),x2=x-x,则x∈E,V∈E, z=∑(=,e),实际计算得到 (x2,2)=(x-x,2)=(x,=)-(x1,2)=0 故x2⊥E,从而Px=x1=∑(x,e1)1,由投影定理 d(xE)=1k-x|=(-|)=(-(xe) 思考题若e1,e2,…是E的规范正交基,证明类似的结论成 推论1设H是 Hilbert空间,EcH是闭线性子空间,记从H 到E的投影算子是P,则 (1)P:H→>E是线性算子 (2)|Pls.若E={0),则P=0,若E≠0},则|P=1 (3)E=R(P)=N(I-P),N(P)=R(-P) 称E是P的投影子空间
3 (闭凸集)的最佳逼近元。不仅如此,在 Hilbert 空间上我们还可以定 量地计算出一点到最佳逼近元的距离。 例 1 设 H 是 Hilbert 空间, E ⊂ H 是线性子空间, dim E = n , n e , ,e 1 " 是 E 的一组规范正交基,则 ∀x ∈ H , ∑= = n i E i i P x x e e 1 ( , ) 并且 dxE (, ) = 2 2 1 2 1 ( (, )) . i i x xe ∞ = −∑ (4-2-3) 若{ }n e 是 H 中的规范正交集, { }n E = span e ,则 1 (, ) E ii i Px xe e ∞ = = ∑ 并且 2 2 1 2 1 (, ) ( (, )) . i i d xE x xe ∞ = = −∑ (4-2-4) 实际上,令 ∑= = n i i i x x e e 1 1 ( , ) , 2 1 x = x − x ,则 x1 ∈ E , ∀ ∈z E , 1 (, ) n i i i z ze e = = ∑ , 实际计算得到 21 1 ( ,) ( ,) (,) ( ,) 0 x z x x z xz x z =− = − = 故 x2 ⊥ E ,从而 ∑= = = n i E i i P x x x e e 1 1 ( , ) . 由投影定理 1 2 2 2 1 1 dxE x x x x (, ) ( ) =− = − = 2 1 2 2 1 ( (, )) n j j x xe = −∑ . 思考题 若 1 2 e e, ," 是 E 的规范正交基, 证明类似的结论成 立. 推论 1 设 H 是 Hilbert 空间, E H ⊂ 是闭线性子空间, 记从 H 到 E 的投影算子是 P, 则 (1) P : H → E 是线性算子. (2) P ≤1.若 E = {0} , 则 P = 0; 若 E ≠ {0}, 则 P = 1. (3) E = RP N I P NP RI P ( ) ( ), ( ) ( ). = − =− 称 E 是 P 的投影子空间
证明1°设x=x1+x2,y=y1+y2,其中x1,y∈E,x2,y2⊥E a+B=(ax1+的1)+(a2+y2 其中x1+的1∈E,而v∈E,(x2,=)=0,(02,=)=0,故 (ax2+By2,=)=a(x2,=)+B(y2,=)=0 所以aa2+y2⊥E,于是 P(ax+的y) 的1=aPx+BP P是线性的 2x∈H,若x=x1+x2是正交分解,则|2=|x|+|x1.从 P+2=x≤|+,|P+|≤|,Ps1 若E 则Vx∈H,Px=0,故P=0 若E≠{0},则有x∈E,|xl1使得Px=x1,|Pl≥|Px x|=1,从而P=1 ∈R(P)当且仅当 x2时x2=0,此即 y-Py=0从而y∈N(I-P),反过来也一样,另一式子可同样证明 定理3设H是 Hilbert空间,EcH是线性子空间,记 E H,x⊥E},则 (1)E是H的闭线性子空间 (2)若E是闭的,则E艹=E (3)若E是闭的,则H=E田E,即 H=E+EE∩E (4-2-5) (4)若E是闭的,P:H→E是投影算子,则E=N(P) 通常称E是E的正交补空间由于(4-2-5),称H是E与E的
4 证明 D 1 设 1 2 1 2 x = x + x , y = y + y , 其中 11 2 2 x , ,, y Exy E ∈ ⊥ , 则 ( ) ( ), 1 1 2 2 αx + βy = αx + βy + αx + βy 其中 1 1 αx + βy ∈ E, 而 ,( , ) 0,( , ) 0, ∀z ∈ E x2 z = y2 z = 故 22 2 2 ( , ) ( , ) ( , ) 0. αx yz xz yz += + = βα β 所以 αx2 + βy2 ⊥ E , 于是 ( ) . P αx + βy =αx1 + βy1 =αPx + βPy P 是线性的. D 2 ∀ ∈x H, 若 1 2 x = x + x 是正交分解, 则 2 x = 2 1 x + 2 2 x . 从 而 2 Px = 2 1 x ≤ 2 x , Px ≤ x , P ≤1. 若 E = {0}, 则 ∀x ∈ H , Px = 0 , 故 P = 0 . 若 E ≠ {0} , 则 有 x1 ∈ E , 1 x1 = 使 得 1 1 Px = x , P ≥ Px1 = 1 x =1, 从而 P =1. D 3 由 于 y ∈ R(P) 当且仅当 1 2 y = x + x 时 0 x2 = , 此 即 y − Py = 0 从而 y ∈ N(I − P), 反过来也一样, 另一式子可同样证明. 定 理 3 设 H 是 Hilbert 空 间 , E ⊂ H 是线性子空间 , 记 E = { } x ∈ H x ⊥ E ⊥ , , 则 (1) ⊥ E 是 H 的闭线性子空间. (2) 若 E 是闭的, 则 E = E ⊥⊥ . (3) 若 E 是闭的, 则 ⊥ H = E ⊕ E , 即 ⊥ H = E + E , ∩ = {0} ⊥ E E . (4-2-5) (4) 若 E 是闭的, P : H → E 是投影算子, 则 ⊥ E = N(P). 通常称 ⊥ E 是 E 的正交补空间. 由于(4-2-5), 称 H 是 E 与 ⊥ E 的
直和.换句话说,(3)表明Hbet空间的每个闭子空间存在正交补空 间 证明1若x,y∈E,则∈E,x⊥2,y⊥,从而 (ax+的,=)=a(x,2)+B(y,)=0 故ax+∈E,E是线性子空间 若xn∈E,x→x,则Vz∈E,(xn,z)=0.由内积关于变元的 连续性,(x,2)=lim(xn2,2)=0,故x⊥2,X∈E,E是闭的 2设E是闭的,则由E⊥E知道EcE.另一方面,若 x∈E,则x⊥E.若x=x1+ E,x2⊥E,则x2∈E,从 而(x,x2)=0.于是 (x2,x2)=(x1+x2,x2)=(x,x2)=0 故x2=0,x=x1∈E,即EcE.最后E=E1 3°由定理2,Vx∈H,x=x1+x2,其中x1∈E,x2⊥E.即 x2∈E从而H=E+E,另一方面E∩E={0}故H=E由E 4x∈H,x=x1+x2其中x1∈E,x2⊥E.故x∈E当且仅 当x1=0,即Px=0或x∈N(P)从而E=N(P) 思考题若H是内积空间,M,NcH (1)若M⊥N,则McN,NcM (2)若McN,则M→N4 3)M=(M 定义2(1)称线性算子T:X→>X是幂等的,若T=T (2)设H是内积空间,称T∈B(H)是自伴算子,若 (x, y)=(x, y), Vx,yEH 定理4设H是 Hilbert空间,P∈B(H),则下列诸条件等价
5 直和. 换句话说, (3) 表明 Hilbert 空间的每个闭子空间存在正交补空 间. 证明 D 1 若 ⊥ x, y ∈ E , 则 ∀z ∈ E , x ⊥ z , y ⊥ z , 从而 (αx + βy,z) =α(x,z) + β ( y,z) =0, 故αx + βy ⊥ ∈ E , ⊥ E 是线性子空间. 若 ⊥ xn ∈ E , x x n → , 则 ∀z ∈ E , (xn ,z) = 0 . 由内积关于变元的 连续性, (x,z) = lim( , ) = 0 →∞ x z n n , 故 x ⊥ z , ⊥ x ∈ E , ⊥ E 是闭的. D 2 设 E 是闭的, 则由 ⊥ E ⊥ E 知道 E E⊥⊥ ⊂ . 另一方面, 若 ⊥⊥ x ∈ E , 则 ⊥ x ⊥ E . 若 1 2 x = x + x , x1 ∈ E , x2 ⊥ E , 则 ⊥ x2 ∈ E , 从 而 ( , ) 0 x x2 = . 于是 (x2 , x2 ) = (x1 + x2 , x2 ) = ( , ) 0 x x2 = , 故 0 x2 = , 1 x = x ∈ E , 即 E E ⊥⊥ ⊂ . 最后 ⊥⊥ E = E . D 3 由定理 2, ∀x ∈ H , 1 2 x = x + x , 其 中 x1 ∈ E , x2 ⊥ E . 即 ⊥ x2 ∈ E 从而 ⊥ H = E + E . 另一方面 ∩ = {0} ⊥ E E . 故 ⊥ H = E ⊕ E . D 4 ∀x ∈ H , 1 2 x = x + x 其中 x1 ∈ E , x2 ⊥ E . 故 ⊥ x ∈ E 当且仅 当 0 x1 = , 即 Px = 0 或 x ∈ N(P) . 从而 E = N(P) ⊥ . 思考题 若 H 是内积空间, M , N ⊂ H . (1) 若 M ⊥ N ,则 ⊥ M ⊂ N , ⊥ N ⊂ M . (2) 若 M ⊂ N ,则 ⊥ ⊥ M ⊃ N . (3) ⊥ ⊥ M = (M ) . 定义 2 (1) 称线性算子 T : X → X 是幂等的, 若 T = T 2 . (2) 设 H 是内积空间, 称 T ∈ B(H) 是自伴算子, 若 (Tx, y) = (x,Ty), ∀x, y ∈ H . (4-2-6) 定理 4 设 H 是 Hilbert 空间, P ∈ B(H), 则下列诸条件等价: