第二章信息的度量2.1信源模型
第二章 信息的度量 2.1 信源模型
一、概念1.消息:实际信源的输出2.基本消息:构成消息的最小元素
一、概念 1.消息:实际信源的输出 2.基本消息:构成消息的最小元素
3.符号:基本消息■例:将英文视为一个信源,可以将26个英文字母作为基本消息[a,b,.·.z)为基本消息集
3.符号:基本消息 例:将英文视为一个信源,可以 将26个英文字母作为基本消息。 {a,b,...z}为基本消息集;
4.信源的概率描述■信源在t,时刻的输出X是一个取值于符号集E的随机变量。信源输出序列为:(X,,tk ET)T:(时间)参数集Ex:Xt.的值域
4.信源的概率描述 信源在t k时刻的输出Xtk是一个取值于 符号集EX的随机变量。信源输出序列 为: { , } k X t T t k : X T E X k t (时间)参数集 : 的值域
二、信源的分类TEx离散离散时间离散空间离散信源离散连续时间离散空间连续信源连续离散时间连续空间离散信源连续连续时间连续空间连续信源若没有特别说明,所讲信源都是时间离散信源;所讲的离散或连续信源都是指取值空间的离散或连续
二、信源的分类 T Ex 时间离散空间离散信源 离散 离散 时间离散空间连续信源 离散 连续 时间连续空间离散信源 连续 离散 时间连续空间连续信源 连续 连续 若没有特别说明,所讲信源都是时间离散 信源;所讲的离散或连续信源都是指取值 空间的离散或连续