信息熵(香农) 使用指南

信息熵(香农)计算器。输入离散信源各符号概率,计算平均信息量 H(bit/符号),概率应和为 1、零概率项记 0,是数据压缩与加密强度分析的基础指标。

计算公式与原理

H = −Σ pᵢ · log₂(pᵢ)

信息熵(香农)计算器。输入离散信源各符号概率,计算平均信息量 H(bit/符号),概率应和为 1、零概率项记 0,是数据压缩与加密强度分析的基础指标。

典型使用场景

算例参考

注意事项

本工具纯前端运行,输入内容不上传服务器;结果为按上述口径得到的理论估算值。实际应用受设备参数、测量条件与当地规范影响,请以设备铭牌、检测报告与现行标准为准,重大决策建议咨询专业人士。

概率必须和为 1 吗?
是,离散信源概率归一;若输入频率会自动归一化。
零概率项怎么处理?
按极限 0·log(0)=0 计入,不贡献熵。
熵高一定好?
压缩场景高熵意味着难压缩;安全场景高熵(密钥)是好事。
→ 打开信息熵(香农)工具