几种研究对象 ●离散单符号信源。 离散无记忆序列信源 ●离散有记忆序列信源。 (主要是马尔可夫信源) ●连续信源
几种研究对象： ⚫ 离散单符号信源。 ⚫ 离散无记忆序列信源。 ⚫ 离散有记忆序列信源。 （主要是马尔可夫信源） ⚫ 连续信源
需掌握的重点: ●各种定义、概念的实际含义。 ●各种信息量和熵的计算方法
需掌握的重点： ⚫ 各种定义、概念的实际含义。 ⚫ 各种信息量和熵的计算方法
难点: 条件熵、联合熵和平均互信息量的计算。 ●序列熵的计算。 马尔可夫信源熵的计算
难点： ⚫ 条件熵、联合熵和平均互信息量的计算。 ⚫ 序列熵的计算。 ⚫ 马尔可夫信源熵的计算