有氧周末公众号:

查看: 108|回复: 0

【X260】吴军信息论40讲

[复制链接]

9019

主题

9493

帖子

249万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
2490086
发表于 2023-5-24 10:46:49 | 显示全部楼层 |阅读模式
6000—8000年前,人类文明就开启了,但长期处于无知和少知的时代。

在近代短短的300年里,人类迎来了历史上最伟大的认知革命,迅速地进入到理性认知的机械时代。

是牛顿和他同时代的很多科学家一道,确立了机械思维,让人从此不再匍匐于神的脚下,这是人类历史上思维方式的一次飞跃。

牛顿等科学家告诉世人,我们所处的宇宙是连续变化的,而各种变化的规律是确定的。这些确定的规律,

可以用简单的公式或者语言描述清楚。即便你是普通人,掌握了这些规律后,应用到各种未知领域,也可以在各个领域获得成功。
[attach]7409[/attach]


从那以后,人们既热衷于发现这样的规律,进行科学研究,也同时开始利用规律,开展现实世界的发明创造。

瓦特等一代发明家则利用这种新的思维方式,开启了工业革命之门,人类历史从此焕然一新。

从那时起,世界变得越来越确定,一切现象人们好像都能找到合理的解释。对于普通人来说,特别是中下层的人,

他们要想取得成就,都是有定式可以遵循的,那就是接受大学教育,然后成为专业人士。于是,从近代开始,年轻人在大学里学的,

都是那些放之四海而皆准的规律,以及如何使用规律的方法,在随后的人生中,他们只要灵活应用,就能成为社会精英。之后,这种教授专业技能的大学开始在全世界流行。



信息论在大学里通常是通信和信息处理专业研究生的必修课,其它专业(包括计算机专业)的人其实很少会去学这门课。

这并非因为这门课本身不重要,或者是它的内容不吸引人,而是因为它太难学,里面有太多的数学公式,它要求听课的人熟悉微积分和概率论。

后来在Google工作期间,我发现不了解信息论的人在从事信息领域的工作时会走很多弯路,

比如,还有不少软件工程师,反复地使用同一个维度的信息,试图对产品进行改进,开始的时候是事倍功半,

后来就是劳而无功,而他们自己却搞不清楚原因。在外人看来,这些人学傻了,一条道走到黑,白白浪费自己的时间和晋升机会。

但是,我知道,其实只是这些人不了解信息的作用。

因此,我一直建议身边的IT从业者学学信息论——即使不了解其中理论的细节,也应该知道它的原理。

为此,我还在Google买了20多本信息论的教科书给大家。但是大部分人告诉我,读了1/4就读不下去了,因为讲得太难。

于是我萌生了开一门通俗信息论课程的想法——不讲细节,特别是理论的细节,只讲原理和应用,以便听众能够熟悉我们这个时代最适合的思维方式。



世界上的知识,可以分为道和术两个层面,我们这门课讲的是道的层面的知识,它不会讲述任何具体的方法,比如信息的采集、处理或者传输的理论细节。

这样,我们就能够把重点放在讲述用信息论指导做事的方法上,以便让我们能够在不断变化,而且充满不确定性的世界里把握住机会,立于不败之地。



我们的课程主要包括三个模块的内容,它们分别围绕着信息的产生,信息的传输和信息的应用展开。具体的每一讲,

我在后面的课表里列出了。每一讲,我基本都会采用两种方式讲解:一种方式是从分析事件或现象背后的信息论原理出发,

讲解信息论的概念;另一种是从信息论的原理出发,分析我们今天的做事方法。

这三个模块学完以后,我希望你获得三种能力。

模块一信息产生:在面对大量信息时,排除噪音,提取利用有效信息,科学做决策的能力;

模块二信息传播:向外界传递信息时,平衡分配有限资源,增加沟通带宽,放大影响力的能力;

模块三信息应用:看懂信息应用的逻辑和通信发展的趋势,提前抓住新机遇的能力。



课程中既包括信息论最基础、最重要的内容,比如香农的两个著名的定律:与信息产生相关的第一定律和与信息传输相关的第二定律,也包括对今天很多热门的技术的剖析,比如loT和5G等。





下面是小编整理的信息论课程目录:



wj00发刊词│信息时代每个人的必修课.jpg

wj00发刊词│信息时代每个人的必修课.mp3

wj00发刊词│信息时代每个人的必修课2jpg



wjo1|影响世界的三比特信息.jpg

wj01|影响世界的三比特信息.mp3

wj01影响世界的三比特信息2.jpg



wj02|解开世界之谜的三篇诺贝尔奖论文jpg

wj02│解开世界之谜的三篇诺贝尔奖论文.mp3

wj02|解开世界之谜的三篇诺贝尔奖论文2.jpg



wjo3|大数据思维的科学基础.jpg

wj03|大数据思维的科学基础.MP3

wj03│大数据思维的科学基础2.jpg



wjo4|信息的量化度量:世界上有稳赚不赔的生意吗.jpg

wj04|信息的量化度量:;世界上有稳赚不赔的生意吗.mp3

wj04|信息的量化度量:世界上有稳赚不赔的生意吗2jpg



wjo5│信息编码:数字和文字是如何诞生的.jpg

wj05|信息编码:数字和文字是如何诞生的.MP3

wjo5|信息编码:数字和文字是如何诞生的2.jpg



wj06│有效编码:10个手指能表示多少个数字.jpg

wj06│有效编码:10个手指能表示多少个数字.mp3

wj06│有效编码: 10个手指能表示多少个数字2jpg



wjo7│最短编码:如何利用哈夫曼编码原理投资? .jpg

wj07|最短编码:如何利用哈夫曼编码原理投资? .mp3

wj07|最短编码:如何利用哈夫曼编码原理投资?2.jpg



wj08|矢量化:象形文字和拼音文字是如何演化的.jpg

wj08|矢量化:象形文字和拼音文字是如何演化的.mp3

wj08|矢量化:象形文字和拼音文字是如何演化的2.jpg



wj09│冗余度:《史记》和《圣经》哪个信息量大.jpg

wj09|冗余度:《史记》和《圣经》哪个信息量大.mp3

wj09│冗余度:《史记》和《圣经》哪个信息量大2.jpg



wj10|等价性:信息是如何压缩的.jpg

wj10│等价性:信息是如何压缩的.mp3

wj10|等价性:信息是如何压缩的2.jpg



wj11|信息增量:信息压缩中的保守主义原则.jpg

wj11|信息增量:信息压缩中的保守主义原则.mp3

wj11|信息增量:信息压缩中的保守主义原则2.jpg



wj12│压缩比和失真率:如何在信息取舍之间作平衡.jpg

wj12│压缩比和失真率:如何在信息取舍之间作平衡.MP3

wj12│压缩比和失真率:如何在信息取舍之间作平衡2.jpg



wj13│信息正交性:在信息很多的情况下如何作决策jpg

wj13│信息正交性:在信息很多的情况下如何作决策.mp3

wj13│信息正交性:在信息很多的情况下如何作决策2jpg



wj14│互信息:相关不是因果,那相关是什么? .jpg

wj14│互信息:相关不是因果,那相关是什么? .mp3

wj14│互信息:相关不是因果,那相关是什么? 2jpg



wj15│条件嫡和信息增益:你提供的信息到底值多少钱.jpg

wj15│条件嫡和信息增益:你提供的信息到底值多少钱.mp3

wj15│条件嫡和信息增益:你提供的信息到底值多少钱2jpg



wj16|置信度:马斯克犯了什么数学错误.jpg

wj16│置信度:马斯克犯了什么数学错误.mp3

wj16│置信度:马斯克犯了什么数学错误2jpg



wj17|交叉嫡:如何避免制订出与事实相反的计划.jpg

wj17|交叉嫡:如何避免制订出与事实相反的计划.mp3

wj17|交叉嫡:如何避免制订出与事实相反的计划2.jpg



wj18│复盘:如何识别误导人的错误信息.jpg

wj18│复盘:如何识别误导人的错误信息..mp3

wj18│复盘:如何识别误导人的错误信息2.jpg



wj19|信噪比:历史有真相吗.jpg

wj19│信噪比:历史有真相吗.mp3

wj19│信噪比:历史有真相吗2.jpg



wj20│去除噪音:如何获得更多更准确的信息.jpg

wj20|去除噪音:如何获得更多更准确的信息.mp3

wj20│去除噪音:如何获得更多更准确的信息2.jpg



wj21|信道:信息通道的容量有边界吗.jpg

wj21|信道:信息通道的容量有边界吗.mp3

wj21│信道:信息通道的容量有边界吗2.jpg



wj22│香农第二定律(—):为什么你的网页总是打不开jpg

wj22│香农第二定律(—):为什么你的网页总是打不开.MP3

wj22│香农第二定律(—):为什么你的网页总是打不开2.jpg



wj23│香农第二定律(二):到底要不要扁平化管理.jpg

wj23│香农第二定律(二):到底要不要扁平化管理.mp3

wj23│香农第二定律(二):到底要不要扁平化管理2jpg



wj24│纠错码:对待错误的正确态度是什么?jpg

wj24│纠错码:对待错误的正确态度是什么?.mp3

wj24│纠错码:对待错误的正确态度是什么? 2.jpg



wj25│信息加密:韦小宝说谎的秘诀.jpg

wj25│信息加密:韦小宝说谎的秘诀.mp3

wj25│信息加密:韦小宝说谎的秘诀2jpg



wj26│极简通信史:从1G到5G通信,到底经历了什么.jpg

wj26│极简通信史:从1G到5G通信,到底经历了什么.MP3

wj26│极简通信史:从1G到5G通信,到底经历了什么2.jpg



wj27|通信趋势:5G和loT的商机在哪里.jpg

wj27|通信趋势:5G和loT的商机在哪里.mp3

wj27│通信趋势:5G和loT的商机在哪里2.jpg



wj28│复盘:世界不完美,我们该怎么办 .jpg

wj28|复盘:世界不完美,我们该怎么办.mp3

wj28|复盘:世界不完美,我们该怎么办2jpg



wj29|交叉验证:电信诈骗为什么能成功.jpg

wj29|交叉验证:电信诈骗为什么能成功.mp3

wj29|交叉验证:电信诈骗为什么能成功2jpg



wj30|等价性:如何从等价信息里找答案.jpg

wj30|等价性:如何从等价信息里找答案.mp3

wj30│等价性:如何从等价信息里找答案2jpg



wj31|大数据(一):从四个特征把握大数据的本质.jpg

wj31│大数据(一):从四个特征把握大数据的本质.mp3

wj31|大数据(一):从四个特征把握大数据的本质2.jpg



wj32|大数据(二):大数据思维的四个层次.jpg

wj32|大数据(二):大数据思维的四个层次.mp3

wj32|大数据(二):大数据思维的四个层次2.jpg



wj33|互联网广告:为什么Google搜索的广告效果好?-jpg

wj33│互联网广告:为什么Google搜索的广告效果好? .mp3

wj33|互联网广告:为什么Google搜索的广告效果好?2.jpg



wj34|幸存者偏差:如何避免被已知信息误导.jpg

wj34│幸存者偏差:如何避免被已知信息误导.mp3

wj34|幸存者偏差:如何避免被已知信息误导2jpg



wj35|奥卡姆剃刀法则:最简单的往往是最有效的.jpg

wj35│奥卡姆剃刀法则:最简单的往往是最有效的.mp3

wj35│奥卡姆剃刀法则:最简单的往往是最有效的2.jpg



wj36|最大嫡原理:确定的答案找到之前,我们该做什么jpg

wj36|最大嫡原理:确定的答案找到之前,我们该做什么.mp3

wj36 |最大嫡原理:确定的答案找到之前,我们该做什么2jpg



wj37│麦克斯韦的妖:为什么要保持系统的开放性?.jpg

wj37|麦克斯韦的妖:为什么要保持系统的开放性?.mp3

wj37|麦克斯韦的妖:为什么要保持系统的开放性? 2.jpg



wj38|复盘:如何把信息论学以致用.jpg

wj38│复盘:如何把信息论学以致用.mp3



wj39|控制论:要不要成为变色龙.jpg

wj39|控制论:要不要成为变色龙.mp3

wj39|控制论:要不要成为变色龙2.jpg



wj40│系统论:如何让整体效用大于部分之和?.jpg

wj40|系统论:如何让整体效用大于部分之和?.mp3

wj40│系统论:如何让整体效用大于部分之和?2.jpg



wj问答│从信息论角度看科技发展的方向.jpg

wji问答│从信息论角度看科技发展的方向.mp3

wj问答│从信息论角度看科技发展的方向2.jpg



wji问答│高盛是怎么两头通吃的?.jpg

wj问答│高盛是怎么两头通吃的?.mp3

wji问答│高盛是怎么两头通吃的?2.jpg



wj问答│精通各种语言才能做好语言搜索吗.jpg

wj问答│精通各种语言才能做好语言搜索吗.mp3

wj问答│精通各种语言才能做好语言搜索吗2jpg



wj直播回顾:5g是比4g多1g? jpg

wj直播回顾:5g是比4g多1g?2jpg

wj直播回顾:5g是比4g多1g? 3.jpg

wj直播回顾:5g是比4g多1g?4.jpg

wj直播回顾: 5g是比4g多1g? 5.jpg
购买主题 本主题需向作者支付 10 学习币 才能浏览
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /3 下一条

快速回复 返回顶部 返回列表