一、開始使用多線程 Thread類由threading模塊提供,通過實例化Thread類可以創(chuàng)建線程,其構(gòu)造函數(shù)如下: 其中關(guān)于參數(shù)的解釋如下: group,保留參數(shù),暫時沒...
一、開始使用多線程 Thread類由threading模塊提供,通過實例化Thread類可以創(chuàng)建線程,其構(gòu)造函數(shù)如下: 其中關(guān)于參數(shù)的解釋如下: group,保留參數(shù),暫時沒...
一、裝飾器的定義 裝飾器,顧名思義,就是起到裝飾的作用,即在不改變已有函數(shù)代碼及其調(diào)用方式的前提下,對已有函數(shù)進(jìn)行功能擴(kuò)展,實現(xiàn)了低侵入性、高內(nèi)聚低耦合的目標(biāo)。 二、裝飾器使...
一、RDD介紹 1.1 什么是RDD RDD(Resilient Distributed DataSet),稱作彈性分布式數(shù)據(jù)集,是Spark中最基本的數(shù)據(jù)抽象,表示一個不可...
一、PySpark是什么 Python PySpark是Spark官方提供的一個Python類庫,其中內(nèi)置了完全的Spark API,使得Python用戶在導(dǎo)入這個類庫后,可...
一、Marp是什么 Marp是一個輕量的框架,可以將MarkDown編寫的文檔轉(zhuǎn)換為PPT,從而解放開發(fā)者制作PPT的繁瑣過程,只要專注于內(nèi)容的編寫即可。 當(dāng)然,Marp制作...
一、Spark是什么 Spark[https://spark.apache.org/]是Apache下的一個用于大規(guī)模數(shù)據(jù)處理的統(tǒng)一分析引擎,Unified engine f...
一、ZK簡介 在大數(shù)據(jù)技術(shù)體系內(nèi),很多技術(shù)框架都是用動物的名字命名的,比如Hadoop(大象)、Hive(蜜蜂)、Pig(小豬)。大數(shù)據(jù)服務(wù)通常都是分布式的,多個節(jié)點之間角色...
一、DataX Web是什么 DataX web是在DataX的基礎(chǔ)上開發(fā)的分布式的數(shù)據(jù)同步工具,方便DataX的用戶在網(wǎng)頁上通過點擊和配置就能完成DataX任務(wù)的配置和執(zhí)行...
一、DataX是什么 DataX[https://github.com/alibaba/DataX]是阿里巴巴開源的離線數(shù)據(jù)同步工具,實現(xiàn)了包括主流RDBMS數(shù)據(jù)庫、NoSQ...