传播理论与信息理论问题:能否用数学关系式来表达消息中的“冗余”与“信息”比例关系( 二 )
这种编码方式就是有冗余的。现在再看噪声。我们用
来编码信息之后,在信息的储存、传递等过程中可能造成信息的损失或畸变。我们可以把这种信息的损失或者畸变称为噪声。由于这种畸变,导致
可能会对应
的幂集里的一个元素,即
中的一个元素,记为
,这里要求
. 我们用条件概率
来刻画我们的噪声。现在我们假定编码方式
是有冗余的,那么对于
,在发生了上述畸变以后,我们解码会发生什么呢?注意到,有:
即,解码之后的结果不变的概率是不小于未发生信息损失和畸变的概率的,而且通常应该大于,因为
是
的真子集。但是,如果编码方式
无冗余,那么
就是双射,从而
,则有
,也就是说无冗余的编码方式要保证解码之后的结果不变,只有当未发生信息损失和畸变时才可以。因此,从上面的结果我们可以看出,如果信息的编码方式没有冗余,那么信息完全不能抵抗信息的畸变和损失,只要信息的畸变和损失发生了,解码之后的信息就一定跟原来不同。而如果编码的方式有冗余,那么在一定程度上可以抵抗信息损失和畸变的干扰。现在,回到题主的问题上,按我的理解题主问的是冗余的“大小”和抵抗噪声“能力”大小的关系。怎么衡量抵抗噪声“能力”的大小呢?我觉得可以用“发生信息畸变的情况下,解码后信息不受影响的概率”来刻画。也就是:
比较麻烦的是怎么刻画“冗余”的大小。冗余是编码过程的特征,由
推荐阅读
- 广东警方曝光38款存在超范围收集用户信息违规行为App
- 家长反映老师索贿遭声讨后找人理论被拘20天?河北警方通报
- 直播会成为品牌传播的另一个途径么有哪些可行的方法感觉有戏又没头绪好捉急。
- 小米手机的指纹信息保管安全吗
- 学图像处理有哪些不错的书推荐
- 雨下|全球关于禁售燃油车只是理论上可行吗
- 讴歌MDX|于12月8日正式发布,讴歌全新MDX更多信息曝光!
- 电商会怎样存储和保护客户的信用卡信息不被泄漏
- 企业信息化系统可否自己搭建
- 疾病|医生不避讳:4种疾病可以通过性传播,思想开放的人要小心了
