[控场AI]
概念Renyi entropy / Rényi熵

Renyi熵

香农熵的推广形式,由 Alfréd Rényi 提出,通过阶数 α 调节对概率分布不同部分的敏感度,α→0 趋近词汇丰富度,α=1 为香农熵,α=2 为碰撞熵,α→∞ 为最小熵。

时间轴 (近 90 天)

11月9日

Renyi熵在 α→0 时趋近于观测到的词汇丰富度(出现过的词类型数的对数),在 α=1 时等于香农熵,在 α=2 时称为碰撞熵,在 α→∞ 时得到最小熵。

待验证50%

全部知识事实 (1)

来源文章