信息论笔记（需要编辑格式）信息论介绍1.信息量和不确定性有关2.信息的固有属性3.信息改变思维模式4.信息的度量5.编码的长度6.信息的编码7.最短的编码8.编码的矢量化9.编码的冗余度10.信息等价性应用11.信息的增量编码12信息的压缩13信息的正交性14互信息：信息相关性15 新增信息的价值16信息的可靠程度17错误信息的代价18第一模块信息的产生复盘1920如何去除噪音21 信道容量C25信息加密26极简通信史27 loT万物互联29第二模块信息传输复盘 ：沟通30交叉验证31等价性31
主要来源：吴军·信息论40讲信息论介绍世界上任何一个探索者都需要清楚三件事:我们现在的位置,我们的目标,以及通向目标的道路。哲学是一门生活的艺术,它帮助我们认清自己,它回答了第一个问题。至于每一个人的目标,我相信大家比我更清楚。而第三件事其实是方法论。一般没有科学基础的方法论常常难以持久。世界上的知识,可以分为道和术两个层面这门课讲的是道的层面的知识,它不会讲述任何具体的方法,比如信息的采集、处理或者传输的理论细节。这样,我们就能够把重点放在讲述用信息论指导做事的方法上,以便让我们能够在不断.
