信息时代最大的特征是不确定性,而信息论是解决不确定性问题最有效的工具。
介绍信息论从信息的产生、信息的传播、信息的应用三方面阐述,本文重点介绍信息传播。
01 噪音
有信号必有噪音。信号与噪音的能量比例称为信噪比。
噪音通常根据产生的原因以及表现形式作如下的分类:
- 能够找到噪音来源的 VS 不清楚来源的
- 有规律的噪音 VS 随机的噪音,固定频率的噪音 VS 白噪音
去除噪音的方法,过滤生活中的噪音亦是如此:
- 利用信息的冗余
- 换一个角度看问题(将有噪音的信息分解到不同的维度过滤噪音)。
考察和判断一个人是否有处理问题的能力,不是考察他在纯粹无噪音情况下的能力,而是考察他能否有能力在有噪音的情况下,依然把信息找出来处理好。
一个好清单的原则就是简单高效,根据自己的职业列出需要坚持的“清单”。
生活中处理信息和噪音的两点建议:
- 保持接收信息渠道的质量
- 提高自己捕获信息和处理信息的能力
02 信道
没有信道,信息就传输不了,就如没有路,车子就跑不了一样。
信息传输所用的信道一旦固定,能承载的信息量是有限的。信道的量化度量,被称为信道的容量,有时我们直接用“带宽”这个词描述。
信道的容量,决定了有效的传输率。传输率R的定义是单位时间(通常是秒)传输多少比特的信息。信息的传播是有成本的,其成本就源于信息的容量。
信息论中有名的香农第二定律大意:
- 传输率R ≤ 信道容量C。
- 总能找到一种编码方式,使得传输率R无线接近信息容量C,同时保证传输不出任何错误。
- 如果谁试图超越信道容量传输信息,不论你怎样编码,出错的概率都是100%。当超出信道容量时怎么办呢? 唯一的方式是主动降低传输率。
工作、生活中的应用:
- 我们要做的是,了解成本,在边界内尽可能把事情做好。
- 如果你先天的信道容量不足,唯一的方法就是降低速度。
- 组织扁平化管理,本质就是对第二定律的应用,保证一定带宽内的沟通效率或者利用科技提高带宽。
- 人脉就是人与人交往的带宽。其信息的容量是由双方的互信息决定的,它就是双方的信任。如果人脉不够,发出的信息和获得的信息都有限,生意一定做不大。
03 信息纠错
信息传播中,出错是难免的。
对于必然发生的错误,我们该如何面对呢?
最简单的方法是,重复传输,重要的事情说三遍。但是此种方式编码的效率不高。
如何同时提高编码的效率和传输的准确率呢?古代校对《圣经》的方法,海明码。
大自然中,基因的遗传也是个通讯过程,也是通过DNA中的信息冗余来纠错的。
工作、生活中的应用:
- 不要高估自己的仔细,不确定性是我们这个世界自然的属性。
- 在解决任何问题之前,都要考虑到世界的不完美和不确定性,这就是所谓的“凡事预则立,不预则废。”
04 信息加密
韦小宝说谎的要诀:
- 说话九句真,一句假。
- 同样的理由不用两次。(一次性密码最安全。)
明文+密码=密文
密码的精髓在于,对方拿到你的密文,得不到额外的信息,要让对方获得了密文后,也无法减少你传递的信息的不确定性。
学习笔记——吴军博士的《信息论40讲》