信息論

我們所觀察到的的客觀時(shí)間與主觀想象的結(jié)合體。
能量守恒,信息不守恒。
分享知識(shí)可以創(chuàng)造純粹增量的事情。

信息熵

一個(gè)事物不確定可能性的大小,
越大表示越未知。
啟示:
高的信息熵是沒(méi)有價(jià)值的。(相當(dāng)于增加了世界的不確定性)

霍夫曼編碼

把常用的信息,用最簡(jiǎn)單的信息表達(dá)。()
(比如摩斯密碼,最常使用的信息用最便捷的方式表達(dá))

奧卡姆剃刀

如無(wú)必要,勿增實(shí)體。
可以用在改變生活方式上面,看看那些是必要的,那些是非必要的。進(jìn)行優(yōu)化,刪減。

幀間壓縮算法

用于把視頻壓縮處理的算法。


image.png

通過(guò)關(guān)注信息增量,而不是關(guān)注信息存量,去提高效率。


image.png

關(guān)于讀書的方法

集中精力去讀基礎(chǔ)的理論的書,而花更少的時(shí)間去讀淺顯的書。
并且關(guān)注每一本書里面新增加的信息量。


互信息

兩個(gè)事物具有相干性,而不是因果性。
很多時(shí)候只有相關(guān)性,并不是因果關(guān)系。

信息等價(jià)

相當(dāng)于說(shuō)廢話。(沒(méi)有必要的事物)。

冗余度

(有些時(shí)候日常生活中需要增加濃密度,因?yàn)槲覀兇竽X設(shè)置的并非習(xí)慣接觸高濃縮的信息。比如人類喜歡讀小說(shuō)而不是論文,就說(shuō)明小說(shuō)的冗余度比較高,可以讓人們消化。)
通常只增加文件備份來(lái)保證關(guān)鍵資源的可靠工作。

如何保持可以接受高信息

image.png
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 整個(gè)宇宙最重要的就是能量和信息。 三條最重要的公式, 1.物質(zhì)與能量的關(guān)系,能量和物質(zhì)是相通的。 2.香農(nóng)的信息熵...
    千云百鳥閱讀 704評(píng)論 0 0
  • 物理世界是由信息和能量組成的。 宇宙爆炸,信息和能量一同出現(xiàn) 世界上任何一種物質(zhì)都可以用信息量化。 能量守恒,單信...
    infoyou閱讀 816評(píng)論 0 0
  • 把信息和信息產(chǎn)業(yè)甚至是互聯(lián)網(wǎng)行業(yè)畫上了等號(hào),這是個(gè)很大的誤解,其實(shí)信息是宇宙固有的組成部分,就和力運(yùn)動(dòng)本概念...
    行知_7b20閱讀 599評(píng)論 0 0
  • 【通識(shí)課學(xué)習(xí)日志】 本訓(xùn)練營(yíng):林超所長(zhǎng)的通識(shí)課 今日主題:第十五課 信息論重要模型 學(xué)習(xí)日期:2022年10月2日...
    波斯菊閱讀 239評(píng)論 0 1
  • b站大咖林超的跨學(xué)科通識(shí)課講了信息論中常見的模型。 首先通過(guò)張首晟教授最推薦的三條最重要的公式引出。質(zhì)能方程真是太...
    深度思考er閱讀 292評(píng)論 0 0

友情鏈接更多精彩內(nèi)容