理论

信息论

熵、编码与信道,描述信息的数量与传递。

开始阅读
0 / 7 已读

专题与文章目录

3 个专题
01

信息与概率

0 / 2 已读
  1. 熵与信息度量
  2. KL 散度与交叉熵
02

编码与通信

0 / 2 已读
  1. 源编码与压缩
  2. 信道容量与编码
03

表示与应用

0 / 3 已读
  1. 率失真与信息瓶颈
  2. LLM 中的信息论
  3. 选读:条件信息与数据处理