信息論

我們所觀察到的的客觀時(shí)間與主觀想象的結(jié)合體。
能量守恒,信息不守恒。
分享知識(shí)可以創(chuàng)造純粹增量的事情。

信息熵

一個(gè)事物不確定可能性的大小,
越大表示越未知。
啟示:
高的信息熵是沒有價(jià)值的。(相當(dāng)于增加了世界的不確定性)

霍夫曼編碼

把常用的信息,用最簡單的信息表達(dá)。()
(比如摩斯密碼,最常使用的信息用最便捷的方式表達(dá))

奧卡姆剃刀

如無必要,勿增實(shí)體。
可以用在改變生活方式上面,看看那些是必要的,那些是非必要的。進(jìn)行優(yōu)化,刪減。

幀間壓縮算法

用于把視頻壓縮處理的算法。


image.png

通過關(guān)注信息增量,而不是關(guān)注信息存量,去提高效率。


image.png

關(guān)于讀書的方法

集中精力去讀基礎(chǔ)的理論的書,而花更少的時(shí)間去讀淺顯的書。
并且關(guān)注每一本書里面新增加的信息量。


互信息

兩個(gè)事物具有相干性,而不是因果性。
很多時(shí)候只有相關(guān)性,并不是因果關(guān)系。

信息等價(jià)

相當(dāng)于說廢話。(沒有必要的事物)。

冗余度

(有些時(shí)候日常生活中需要增加濃密度,因?yàn)槲覀兇竽X設(shè)置的并非習(xí)慣接觸高濃縮的信息。比如人類喜歡讀小說而不是論文,就說明小說的冗余度比較高,可以讓人們消化。)
通常只增加文件備份來保證關(guān)鍵資源的可靠工作。

如何保持可以接受高信息

image.png
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 整個(gè)宇宙最重要的就是能量和信息。 三條最重要的公式, 1.物質(zhì)與能量的關(guān)系,能量和物質(zhì)是相通的。 2.香農(nóng)的信息熵...
    千云百鳥閱讀 709評論 0 0
  • 物理世界是由信息和能量組成的。 宇宙爆炸,信息和能量一同出現(xiàn) 世界上任何一種物質(zhì)都可以用信息量化。 能量守恒,單信...
    infoyou閱讀 836評論 0 0
  • 把信息和信息產(chǎn)業(yè)甚至是互聯(lián)網(wǎng)行業(yè)畫上了等號(hào),這是個(gè)很大的誤解,其實(shí)信息是宇宙固有的組成部分,就和力運(yùn)動(dòng)本概念...
    行知_7b20閱讀 601評論 0 0
  • 【通識(shí)課學(xué)習(xí)日志】 本訓(xùn)練營:林超所長的通識(shí)課 今日主題:第十五課 信息論重要模型 學(xué)習(xí)日期:2022年10月2日...
    波斯菊閱讀 241評論 0 1
  • b站大咖林超的跨學(xué)科通識(shí)課講了信息論中常見的模型。 首先通過張首晟教授最推薦的三條最重要的公式引出。質(zhì)能方程真是太...
    深度思考er閱讀 303評論 0 0

友情鏈接更多精彩內(nèi)容