前兩篇我們講了spark的基礎(chǔ)知識，包括spark的體系結(jié)構(gòu)、執(zhí)行框架、spark的基本數(shù)據(jù)類型以及spark中stage的劃分等等。本篇要介紹spark運(yùn)行的原理。包括sp...
IP屬地：湖南
-
Spark運(yùn)行原理
-
入門HBase，看這一篇就夠了團(tuán)隊(duì)內(nèi)部要分享HBase的知識，之前研究了一段時(shí)間，知識比較零散，這一次就系統(tǒng)化的整理一番，之后在想到Hbase的時(shí)候，看著一篇就夠了。 阿里陶系技術(shù)部招人，目前大把機(jī)會，H...
-
Python實(shí)現(xiàn)十大經(jīng)典排序算法話不多數(shù)，先上兩張圖： 名詞解釋： n：數(shù)據(jù)規(guī)模k：“桶”的個(gè)數(shù)In-place：占用常數(shù)內(nèi)存，不占用額外內(nèi)存Out-place：占用額外內(nèi)存穩(wěn)定性：排序后2個(gè)相等鍵值的順序...
-
Zookeeper 在 Kafka 中的作用leader 選舉 和 follower 信息同步 如上圖所示，kafaka集群的 broker，和 Consumer 都需要連接 Zookeeper。Producer 直接...
-
最大堆（創(chuàng)建、刪除、插入和堆排序）關(guān)于最大堆 什么是最大堆和最小堆？最大（?。┒咽侵冈跇渲?，存在一個(gè)結(jié)點(diǎn)而且該結(jié)點(diǎn)有兒子結(jié)點(diǎn)，該結(jié)點(diǎn)的data域值都不小于（大于）其兒子結(jié)點(diǎn)的data域值，并且它是一個(gè)完全二叉...
-
30個(gè)Linux Shell腳本經(jīng)典案例（下）
1、從FTP服務(wù)器下載文件 2、連續(xù)輸入5個(gè)100以內(nèi)的數(shù)字，統(tǒng)計(jì)和、最小和最大 3、將結(jié)果分別賦值給變量 應(yīng)用場景：希望將執(zhí)行結(jié)果或者位置參數(shù)賦值給變量，以便后續(xù)使用。 4...
-
LInux上清空或刪除文件的5中方法偶爾,在Linux終端在處理文件，你可能想要清空的內(nèi)容文件而不打開使用任何Linux命令行編輯器。這該如何實(shí)現(xiàn)呢?在本文中,我們將在一些有用的命令幫助下通過幾個(gè)不同的方法清空...
