信息熵怎么理解

来源：学生作业帮助网编辑：作业帮时间：2024/04/26 07:11:01

信息熵怎么理解
信息熵怎么理解

信息熵怎么理解
在全球移动互联网大会发布报告上有的,“熵是用以解决信息量化度量问题,是信息量与信息价值的比值,熵值越低,代表用户获取信息价值越大.”手机QQ浏览器就提出了降熵的概念.

全部展开

现代定义信息是物质、能量、信息及其属性的标示。【逆维纳信息定义】信息是确定性的增加。【逆香农信息定义】信息是事物现象及其属性标识的集合。【2002年】最初定义信息理论的鼻祖之一Claude E. Shannon把信息（熵）定义为离散随机事件的出现概率。所谓信息熵，是一个数学上颇为抽象的概念，在这里不妨把信息熵理解成某种特定信息的出现概率。而信息熵和热力学熵是紧密相关的。根据Charles H. Bennett对Maxwell's Demon的重新解释，对信息的销毁是一个不可逆过程，所以销毁信息是符合热力学第二定律的。而产生信息，则是为系统引入负（热力学）熵的过程。所以信息熵的符号与热力学熵应该是相反的。一般而言，当一种信息出现概率更高的时候，表明它被传播得更广泛，或者说，被引用的程度更高。我们可以认为，从信息传播的角度来看，信息熵可以表示信息的价值。这样子我们就有一个衡量信息价值高低的标准，可以做出关于知识流通问题的更多推论。

收起

信息熵怎么理解请问：怎么理解“信息对称”或“信息不对称”?谢谢! 怎么理解信息的增值性和滞后性,举例说明你是怎么理解信息的概念的? 企业内控信息传递的滞后怎么理解? 信息论奠基人之一香农是怎么理解信息这个词的? 科学合理的生活和信息怎么理解如何理解信息素养? 如何理解信息素养? 新闻学中的“信息”怎么理解?“凡是在一种情况下能减少不确定性的任何事物都叫信息”又怎么理解信息熵信息熵怎样理解信息和知识生态系统各成分间都有各种形式的信息传递这句话对不对,怎么理解? 任何信息和能量的传播速度不能超过光速怎么裂解信息是什么能量是什么还有为什么3C350能光速几倍分离不是裂解是理解古代怎么传递信息古代人怎么传递信息现代人怎么传递信息动植物怎么传递信息