普通的概率区间为[0,1],而取熵之后的取值范围是[0,正无穷大],这样数的熵值就会比单纯的小数更明显更明确

看到熵的计算公式都是用概率*概率的对数值，就想问一下为什么用对数呢？？
最佳答案 普通的概率区间为[0,1]
而取熵之后的取值范围是[0,正无穷大]
这样数的熵值就会比单纯的小数更明显更明确

另外概率越大信息量越小，是一个负相关关系
而用熵来度量概率，熵值越大信息量越大
这就比概率更直观

所有跟帖： 

• 正态分布、伽玛分布、指数分布 等，都是最大熵原理的特殊情况 -marketreflections- ♂ (9979 bytes) () 12/31/2010 postreply 10:55:36

• 标量场矢量场熵 internet out of small box 熵 bigger -marketreflections- ♂ (2905 bytes) () 12/31/2010 postreply 11:07:01

• 等溫等壓過程前後，吉布斯自由能不可能增加。如果發生的是不可逆過程，反應總是朝著吉布斯自由能減少的方向進行。 -marketreflections- ♂ (9168 bytes) () 12/31/2010 postreply 11:13:57

• G = U &#8722; TS + pV = H &#8722; TS,△G < 0，s the biggest,all so -marketreflections- ♂ (1087 bytes) () 12/31/2010 postreply 11:19:36