one fable-low hijack cell
pair entropy / information
envelope zh_huo_q
ordering AB
effort low
Chinese '或' with explicit question marker — '{X}或{Y}?'
verdictpicked entropy (first-offered)
· classifierA
· tiernone
response (200 chars)
这取决于你想问什么——这两个概念密切相关但视角不同。我先简要梳理一下,你可以告诉我具体语境:
## 核心关系
在信息论(Shannon, 1948)中,**熵(entropy)就是信息的度量**:
$$H(X) = -\sum_i p_i \log_2 p_i$$
- **熵** = 随机变量的**不确定性**,或者说观测结果**平均能带来多少信息**
- **信息** = 不确定性的**
neighbors