程帆 · 信息论修读档案

这门课基本就是信息论最底裤的那层内容，课程内容别人都念叨过了，我也懒得复读。 整体而言，我觉得内容编排算比较讲道理的。半学期下来基础核心基本端齐，够你对这门学科建立一个初级世界观，应付其他方向的应用也基本到位。 可能有人嫌这门课学到的东西不够塞牙缝，但我觉得这纯属主观。一来你不能指望半学期讲完整本 Cover 的书；二来本课大纲其实罩住了信息论根基，讲的时候绕开了成堆繁琐证明而更偏重直观，我倒觉得不算一个坏的讲法，毕竟上课不就是为了嚼那一口intuition嘛。当然副作用是你课下得自个儿回去咀嚼理论细节，见仁见智咯。另外这门课的slides做得还是可以的。 本课考试贼简单，至少今年没往典型集和信道理论细节里塞，搞到你不学这些照样能考。其实真建议考卷里涉及点这些理论基础吧。 作业呢，就是书上的课后题，普遍不费劲。 本课最大的槽点就是考勤，按3次考勤线性劈出10分考勤分真的挺草率。 授课质量的话，其实还凑合。老师上课讲intuition比较多，节奏不快，帆本人也挺和蔼。问题就是早八真不是碳基生物该上的时间。 整体来说，还是推荐这门课的。这课基本没为难对信息论没兴趣的人，对真心想学的也还算友善。

2025/10/29 upd. 哟嚯，恭喜程帆老师直升华师大正教授🤣，同喜同喜，这下明年信息论不知道轮到哪位老师来接盘了，哈哈哈 ------------------- 原回答： # 酱班签到三幻神之首，绝对公平之天秤·程帆 课程点评隔壁楼下已经刨得底朝天了，那我这儿就贴段聊天复读 “@All 成绩有疑问今天可以复核，明天一交上去可就没得改了” “@程帆 Fan Cheng 老师，请问签到分是0次0分、1次34分、2次67分、3次100分这么一步步来的吗？” “对，按3次算” “原始签到分还会给调一调吗[可怜]” “改不了。这就是原始分，基本的公平总归得守着” “牛[强]那确实是公平到极致了，谢老师” 签到是早八里随机跳出来的，签到分雷打不动不给调，考试纯属白送，区分度全靠签到那十分硬生生拉出一道鸿沟，祝贺程帆老师用这套路玩出了一个赏心悦目的curve！/鼓掌 该骂的都骂遍了，还是盼着下一届John班同学把它当反面教材，要是下一届评分标准里那10%的出勤分还赫然在列，那就麻烦各位每一节都乖乖露脸吧

课程内容： 信息度量：熵、微分熵、互信息。数学性质、相互关系。 AEP: 来历、证明、性质。数据压缩。 熵率：定义，计算。几种典型稳定过程的熵率计算。 数据压缩：Kraft不等式及其证明。Huffman编码以及上下界。 信道编码：信道容量计算公式，几种典型信道模型的信道容量的计算。信道容量的基本证明。 微分熵：最大熵 高斯信道：模型、容量推导及其计算。 教材：Elements of Information Theory (Thomas M. Cover, Joy A. Thomas) 上课自由度： 高，完全不管你干嘛，但有三次签到 考核标准： 考勤 10% + 期末*60%+ 作业 *30% 考勤是三次签到（可以远程签到），一次占三分之一的考勤分，也就是说你少签到一次总评里面就3.33分没了，三次都不签到10分就没了 考试很简单，基本一学期不听课考前突击也能考满分。以及考试可以自己准备四页的cheeting paper。作业难度中上，有小部分题需要动脑，但都是教材习题，网上有答案，所以作业分大家基本都拿满或接近拿满了 授课质量： 不清楚，本人主要靠对着ppt自学，另外ppt有些地方讲不太明白，得回去翻教材和gpt

课程内容：信息论的知识，没啥好说的 上课自由度：极其自由，老师甚至鼓励你逃掉早八，然后去串别的时间段的班 考核标准：平时作业40，期末60（可以带cheat sheet） 很值得一提，最好认真做平时作业，期末对平时作业非常过拟合，跟背题库押题似的。这次期末五道大题里有三道基本就是作业原题，所以我这种没学明白的也能靠过拟合刷高分 授课质量：虽然程老师人很好，但授课质量确实有点不太理想。讲得不太清楚，而且口癖一大堆，听着好卡 顺带提一嘴，老师把课程录屏传上b站了，直接搜就能搜到，所以不是必修的话完全可以拿网课代替（）

课程内容：别人说的那些。 上课自由度：高，来不来不管，来了干什么更不管，后期到课人数基本不到一半。 考核标准：40作业60期末。 授课质量：感觉还行，但老师的声音对我来说属于顶级催眠白噪音，一般能撑住听课的时间最多占一半。帆总给分挺好的。期末比较简单，有作业原题，复习可以翻翻作业。但这门课学到的东西也很少。

课程内容：信息熵、互信息、AEP；信源编码、信道容量 上课自由度：非常松绑，就是个偶尔突击签到的存在 考核标准：大作业+期末+平时 授课质量：帆帆讲课这事吧确实不敢往高了夸，可给分嘴特大方的（干IEEE课老师的基本码德）。就是期末那记原题设的坑真挺损（自己憨憨跳进去啦!!!!）

上课自由度：签到三次，来不来随缘，但缘分来了你得在。 考核标准：10签到，20平时作业，30大作业，40期末考试。平时作业量比较大，会扣分，最后按比例写入总评，建议交作业前对对答案。作业题有的比较抽象——抽象到你想给它颁个当代艺术奖。 授课质量：一般，感觉有些难点讲的不是很清晰，就像隔着磨砂玻璃看黑板。 期末考试过于抽象了，个别题有种作业题的感觉，均分只有71，最后总评平均分86。

课程内容：信息熵、马尔科夫链、信道这些玩意儿。 上课自由度：挺高，就是偶尔跟鬼一样冷不丁来个签到。 考核标准：10%签到+40%大作业+50%期末考。期末考5道大题，老师大概觉得我们信道复习得太好，所以一道信道题都没出，课内知识点基本等于没考，这波操作有一种让人崩溃的美。 授课质量：要是真对信息论这部分感兴趣，建议直接看书，别指望课堂。有的课吧，就像根本没开，但它又确实开着，薛定谔看了都直呼内行。

课程内容：信息熵、互信息、AEP，再加信源编码、信道容量，信息论祖传套餐一锅端，经典到能拿去当传家宝。 上课自由度：高，签到三次人到了就行，纯纯的打卡型选手福音；cf本人亲口说他b站20年的视频质量比上课讲的更好，事实也确实如此（bushi）。 考核标准：本来的配方是15%平时+25%大作业+60%期末，后来因为期末平均分凄凄惨惨戚戚地卡在71，直接改成了30%平时+30%大作业+40%期末，堪称一场由71分引发的配比大地震。 授课质量：这学期yysy帆总的授课质量一般（毕竟当年辛辛苦苦录了视频，摆了也能理解是吧），真想学点东西的话b站视频值得认真看，相当于正片在花絮里。 鄙人不才，面对这次期末考试偏技巧性的5个大题也就写出来两个基础的，后面三题纯纯是狼狈地糊完的，主打一个重在参与。个人并不太赞同这种出卷方式，和周边同学聊天时也戏称“只需要知道互信息和熵的定义，任何一个精通不等式的同学都能取得很不错的成绩”。当然客观而言，帆总还是非常重视同学们的意见的，也在想方设法绕过jwc优秀率的限制尽可能给同学一个好看的成绩。作为CS专业的同学选修这门课，个人认为信息论这门课如果学好了的话，对于后续的计网乃至DL都有不错的帮助。 大作业成绩出来之后再更 ---------------------------------- 大作业均分95，感谢帆总不杀之恩

课程内容：这门课不做要求 上课自由度：挺好，三次签到来收个人头 考核标准：平时作业+签到+期末+大作业 授课质量：这门课不做要求

上课讲的稀里糊涂，如听一锅炖糊的粥 下课作业难的要死，笔杆子都在求救 快跑，用尽体育中考的速度跑。

总体来说是块硬骨头，2学分硬塞进半个学期，体感上属于那种偏难的4学分狠课。 信息论这课点技能树的姿势极其花哨，概率和代数计算要点，构造性证明要点，数分那种极限思想还得点，想把这套授课内容吃透，难度约等于嘴里嚼着玻璃还要背圆周率。 再叠个buff：ppt和教材纯英文，程老师的口音（参考计导）加上语调语气，效果约等于自带催眠白噪音，建议提前备好课下额外remake的档期。 （ppt风格不太合我胃口，经常看得我满头问号，可以先去b站看一眼 仅从个人体验来说，内容很丰富，收获还是不小的，但没接触过的话压力会比较大。 期中结课，有期末考和大作业，都不是特别难但也需要准备。所以我的建议是：当前学期课少可以考虑，课多且非必修的话不安利。 如果必修的话程老师是t0，不选也可以去看b大视频，选课前可以挑几分钟感受一下。 上课自由度：三次canvas签到 考核标准：平时作业，大作业，期末考试（疫情取消。 以及老师人很好，在群里比助教答疑还积极。

课程内容：信息论那点基础内容，虽然ppt都是程老师亲手做的，程老师本人学术素养也挺能打，但可能是疫情线上上课的关系，讲得不太清楚，课后基本还得自己把书再啃一遍。 上课自由度：高 考核标准：这学期线上上课，所以最后考核方式变成了大作业。大作业的评分标准吧，一言难尽，选题一旦撞车，创新分就直接给你按到地板，我是真不太理解，我很认真地做了结果分数偏低，挺失望的。不过据往届学长学姐的情况，要是有期末考试，大作业评分基本给满，而且考试也不难。综合来看，要是正常上课的学期，还是推荐IEEE的同学选这门课。 讲课质量：中等偏上

课程内容：信息论的经典的知识 + 一些新的东西 + 老师的一些研究内容，一锅端上来，管饱 上课自由度：非常自由 可以不来，教室只是个打卡点 考核标准：考试 + 小组大作业 （给分高） 讲课质量：知识点覆盖的比较全比较新，可以去B站看到往届视频 https://www.bilibili.com/video/BV1kE411E7HX， 最重要的是总之别选另外一个班就对了，选错班比信道噪声还致命