伏尼契手稿和熵 (信息论)

快捷方式: 差异，相似，杰卡德相似系数，参考。

伏尼契手稿和熵 (信息论)之间的区别

伏尼契手稿 vs. 熵 (信息论)

伏尼契手稿（Voynich manuscript），是一本內容不明的神秘書籍，共240頁，附有插图，而作者不詳。書中所用字母及語言至今无人能识别，與現代的語言完全搭不上，似乎是中古世紀煉金術士之參考書籍。書名伏尼契來自名為的波蘭裔美國人书商，他於1912年在義大利買下此书。2005年，这部书入藏耶鲁大学的贝内克珍本与手稿图书馆，编号MS 408。 2011年透過放射性碳定年法檢測出其書成於十五世紀初，估計在1404-1438年間，可信度達95%。这份手稿被發現以來，專業和業餘的譯解密碼員，如第二次世界大戰期間英美頂尖解碼專家，都積極研究它，但是未能破譯出隻字片語。一連串的失敗令伏尼契手稿儼然成為密碼術历史中的「聖杯」。不過，也有不少人認為手稿只不過是個惡作劇——因為書中的符號排列全無意義可言。. 在信息论中，熵（entropy）是接收的每条消息中包含的信息的平均量，又被稱為信息熵、信源熵、平均自信息量。这里，“消息”代表来自分布或数据流中的事件、样本或特征。（熵最好理解为不确定性的量度而不是确定性的量度，因为越随机的信源的熵越大。）来自信源的另一个特征是样本的概率分布。这里的想法是，比较不可能发生的事情，当它发生了，会提供更多的信息。由于一些其他的原因，把信息（熵）定义为概率分布的对数的相反数是有道理的。事件的概率分布和每个事件的信息量构成了一个随机变量，这个随机变量的均值（即期望）就是这个分布产生的信息量的平均值（即熵）。熵的单位通常为比特，但也用Sh、nat、Hart计量，取决于定义用到对数的底。 采用概率分布的对数作为信息的量度的原因是其可加性。例如，投掷一次硬币提供了1 Sh的信息，而掷m次就为m位。更一般地，你需要用log2(n)位来表示一个可以取n个值的变量。 在1948年，克劳德·艾尔伍德·香农將熱力學的熵，引入到信息论，因此它又被稱為香农熵。.

位元

位元（Bit），亦称二進制位，指二进制中的一位，是資訊的最小单位。Bit是Binary digit（二进制数位）的缩写，由数学家John Wilder Tukey提出（可能是1946年提出，但有资料称1943年就提出了）。这个术语第一次被正式使用，是在香农著名的论文《通信的数学理论》（A Mathematical Theory of Communication）第1页中。 假设一事件以A或B的方式发生，且A、B发生的概率相等，都为0.5，则一个二进位可用来代表A或B之一。例如：.

伏尼契手稿和位元 · 位元和熵 (信息论) · 查看更多 »