大數(shù)據(jù)技術(shù)原理與應(yīng)用:大數(shù)據(jù)概述

大數(shù)據(jù)概述

為什么說大數(shù)據(jù)是第三次信息化浪潮?

數(shù)據(jù)技術(shù)支撐

存儲(chǔ)設(shè)備便宜

處理能力提升

網(wǎng)絡(luò)帶寬提升

數(shù)據(jù)產(chǎn)生方式變革

數(shù)據(jù)產(chǎn)生方式

大數(shù)據(jù)發(fā)展三個(gè)階段

由于技術(shù)支撐以及數(shù)據(jù)產(chǎn)生方式變革,促成了大數(shù)據(jù)~

大數(shù)據(jù)定義

  • 數(shù)據(jù)量大


    大數(shù)據(jù)摩爾定律
  • 數(shù)據(jù)類型繁多:由結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)組成


    類型多
  • 處理速度快:秒級(jí)決策


  • 價(jià)值密度低


    廈大校園
  • 故大數(shù)據(jù)4v特性

大數(shù)據(jù)關(guān)鍵技術(shù)

兩大核心技術(shù):分布式存儲(chǔ)與處理

大數(shù)據(jù)計(jì)算模式

大數(shù)據(jù)計(jì)算模式區(qū)分

  • 流計(jì)算比如用戶點(diǎn)擊流、日志流等,秒級(jí)實(shí)時(shí)響應(yīng)
  • 不同產(chǎn)品服務(wù)于不同業(yè)務(wù)問題

大數(shù)據(jù)與云計(jì)算、物聯(lián)網(wǎng)的關(guān)系

云計(jì)算

云計(jì)算概念

  • 云計(jì)算通過網(wǎng)絡(luò)以服務(wù)的方式為用戶提供了非常廉價(jià)的資源。
  • 云計(jì)算解決了海量數(shù)據(jù)"分布式存儲(chǔ)和分布式處理"以及"虛擬化、多租戶"兩大問題


    云計(jì)算三大名詞
  • IaaS:基礎(chǔ)設(shè)施即服務(wù):ec2...
  • PaaS:平臺(tái)即服務(wù): app engine...
  • SaaS:軟件即服務(wù):google apps...

物聯(lián)網(wǎng)

物聯(lián)網(wǎng)概念

  • 從層次架構(gòu)看,分為:感知層、網(wǎng)絡(luò)層、處理層、應(yīng)用層
物聯(lián)網(wǎng)技術(shù)列舉

大數(shù)據(jù)、云計(jì)算和物聯(lián)網(wǎng)三者關(guān)系

云計(jì)算為大數(shù)據(jù)提供了技術(shù)基礎(chǔ),大數(shù)據(jù)為云計(jì)算提供了用武之地
大數(shù)據(jù)繼承自云計(jì)算
物聯(lián)網(wǎng)是大數(shù)據(jù)的重要來源
大數(shù)據(jù)技術(shù)為物聯(lián)網(wǎng)數(shù)據(jù)分析提供技術(shù)支撐
云計(jì)算為物聯(lián)網(wǎng)提供海量數(shù)據(jù)存儲(chǔ)能力
物聯(lián)網(wǎng)為云計(jì)算提供了廣闊的應(yīng)用空間


以上是廈門大學(xué)林子雨教授所傳授的《大數(shù)據(jù)技術(shù)原理與應(yīng)用》的PPT以及個(gè)人筆記,這里做下自己的記錄。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容