、平均互信息 基本公式 p(y/x) x() ly() 波形信道 采样后 X=(X1, Y=(Y1;…,Yy) X;∈[a,b 2∈ I(X;n=h(r-h(xin=h(r-h(rx)
三、平均互信息 波形信道 ｛x(t)｝ ｛y(t)｝ 1 ( , , ) X X X = N 1 ( , , ) Y Y Y = N [ , ] X a b i [ , ] Y c d i p y x ( ) I X Y h X h X Y h Y h Y X ( ; ) ( ) ( | ) ( ) ( | ) = − = − 基本公式
42信息率失真函数 实际应用中,允许信号有一定的失真,当失真超过一定 限度后,信息将失去实用价值,因此要规定失真的限度 信息率失真是AD转换、量化、频带压缩和数据压缩的 理论基础. 42.1失真函数 1)失真函数定义 信源 经过信源编码后输出 对于每一对(1,v),指定一个非负函数 d(l,v)≥0i=1,2,…,nj 称d(x,y)为单个符号的失真函数表示信源发出符 号x,接收端再现y所引起的误差或失真 d(x,y)=0无失真,d(x,y)>0有失真
实际应用中, 允许信号有一定的失真, 当失真超过一定 限度后 , 信息将失去实用价值, 因此要规定失真的限度. 信息率失真是A/D转换、量化、频带压缩和数据压缩的 理论基础. 4.2.1 失真函数 1) 失真函数定义 信源 经过信源编码后输出 对于每一对(ui , vj ) , 指定一个非负函数 d ( ui , vj ) ≥ 0 i = 1 , 2 , … , n j = 1 , 2 , … , m 称 d ( xi , yj ) 为单个符号的失真函数. 表示信源发出符 号 xi , 接收端再现yj 所引起的误差或失真. d ( xi , yj ) = 0 无失真 , d ( xi , yj ) > 0 有失真. { , , , } U = u1 u2 un { , , , } 1 2 m V = v v v 4.2 信息率失真函数