面試題 如何保證消息的可靠性傳輸？或者說，如何處理消息丟失的問題？ 消息中間件各種面試題：消息中間件面試題：消息丟失怎么辦？消息中間件面試題：消息隊列的優(yōu)缺點，區(qū)別消息中間件...
發(fā)簡信
IP屬地：廣東
-
消息中間件面試題：消息丟失怎么辦？ -
Hadoop系列之yarn架構(gòu)與流程淺析Yarn介紹 MapReduce 早期的 JobTracker/TaskTracker 機制在可擴展性，內(nèi)存消耗，線程模型，可靠性和性能存在較大的缺陷， 為從根本上解決框架的...
-
Hive系列之HSQL轉(zhuǎn)換成MapReduce過程hive的庫、表等數(shù)據(jù)實際是hdfs系統(tǒng)中的目錄和文件，讓開發(fā)者可以通過sql語句， 像操作關(guān)系數(shù)據(jù)庫一樣操作文件內(nèi)容， 比如執(zhí)行查詢，統(tǒng)計，插入等操作。一直很好奇hive是...
-
招聘貼--京東物流平臺數(shù)據(jù)部
招聘崗位：Java Web高級工程師： 3年以上JAVA開發(fā)經(jīng)驗、JAVA基礎(chǔ)扎實，熟悉多線程、IO、JVM等。 熟悉Spring、SpringMVC/struts、Ibat...
-
04. Hive源碼 — HQL解析(抽象語法樹的生成和語義分析)
HQL的解析過程主要在Driver中的compile方法，這一些主要看這個方法中的代碼。 1. compile中的主要內(nèi)容 compile中主要有三大部分內(nèi)容： 根據(jù)SQL生...
-
Hive主要模塊及調(diào)用關(guān)系Hive主要模塊及調(diào)用關(guān)系 Hive工作原理 Hive的編譯器 編譯器主要有這么幾個模塊：Parser，SemanticAnalyzer，LogicPlanGenerator...
-
Hive源碼解讀（4）命令處理器（CommandProcessor）在前文中，我們知道命令的執(zhí)行最終是由命令處理器CommandProcessor的run方法來完成的，命令處理器的構(gòu)建采用設(shè)計模式中的工廠模式。命令處理器主要分為兩類，我們稱之...
-
Lambda架構(gòu)大數(shù)據(jù)系統(tǒng)的關(guān)鍵問題：如何實時地在任意大數(shù)據(jù)集上進行查詢？最簡單的方法是，直接在全體數(shù)據(jù)集上運行查詢函數(shù)得到結(jié)果，但是這種方法的計算代碼太大，所以不現(xiàn)實。 Lambda架構(gòu)通...
-
理解Spark中Job-Stage-Task之間的關(guān)系Spark-Job-Stage-Task之間的關(guān)系 基本概念 在開始之前需要先了解Spark中Application，Job，Stage等基本概念，官方給出的解釋如下表： J...
