不确定度和自信息量在数值和单位上都一样,但二者有本质区别。不确定度是随机事件固有的,不论事件是否发生都存在。而自信息量是指事件发生后为了消除不确定度所需要的信息的量度,只有事件发生后才有。这是二者的区别。
因为根据信息熵的定义,信息熵的值和某个信息出现的概率是相关的,这个出现概率越大,表示系统确定性越高,因为有极大可能出现这个信息,根据表达式熵的值越小。在热力学中也用熵来描述系统的混乱程度,有相似的地方。
不确定度和数据处理
不确定度和自信息量在数值和单位上都一样,但二者有本质区别。不确定度是随机事件固有的,不论事件是否发生都存在。而自信息量是指事件发生后为了消除不确定度所需要的信息的量度,只有事件发生后才有。这是二者的区别。
因为根据信息熵的定义,信息熵的值和某个信息出现的概率是相关的,这个出现概率越大,表示系统确定性越高,因为有极大可能出现这个信息,根据表达式熵的值越小。在热力学中也用熵来描述系统的混乱程度,有相似的地方。