發(fā)簡(jiǎn)信
IP屬地：廣東
一.目錄 本系列文章對(duì)Hadoop知識(shí)進(jìn)行復(fù)盤(pán)。分為四個(gè)階段，Copy階段，Merge階段，Sort階段，Reduce階段。如下為ReduceT...
一.目錄 本系列文章對(duì)Hadoop知識(shí)進(jìn)行復(fù)盤(pán)。分為五個(gè)階段，Read階段，Map階段，Collect階段，溢寫(xiě)階段，Combine階段。如下為...
一.目錄 本系列文章對(duì)Hadoop知識(shí)進(jìn)行復(fù)盤(pán)。分為兩個(gè)階段，建立連接階段，提交job階段。 二.建立連接 客戶端提交MR程序后，首先是運(yùn)行jo...
抽象類：如果一個(gè)類含有抽象方法，則稱這個(gè)類為抽象類，抽象類必須在類前用abstract關(guān)鍵字修飾。由于抽象方法只有聲明而沒(méi)有具體的實(shí)現(xiàn)，所以不能...
paxos算法是一種基于消息傳遞的且具有高度容錯(cuò)性的一種算法，解決的問(wèn)題是一個(gè)分布式系統(tǒng)如何就某個(gè)值達(dá)成一致。該算法的前提是假設(shè)不存在拜占庭將軍...
主要通過(guò)事務(wù)日志以及數(shù)據(jù)快照來(lái)實(shí)現(xiàn)。事務(wù)日志：記錄了對(duì)zookeeper的操作，以axid命名，可以快速的定位到查詢的事務(wù)。同時(shí)采用磁盤(pán)預(yù)分配策...
zookeeper中的ACL由三部分組成：權(quán)限模式、授權(quán)對(duì)象、權(quán)限權(quán)限模式：IP digest world super
zookeeper中的事務(wù)都是由一個(gè)全局唯一的ID稱為zxid，zxid由兩部分組成：一部分為leader周期epoch，一部分為遞增計(jì)數(shù)器。從...
2pc,3pc,paxos,zab在分布式應(yīng)用中，每個(gè)節(jié)點(diǎn)都知道自己的事務(wù)提交的結(jié)果是成功或者失敗，但是無(wú)法直接獲取其他分布式節(jié)點(diǎn)的結(jié)果。因此需...