https://b23.tv/6UlXVeO
IP屬地：北京
-
螞蟻 3 年外包，4個月，剛拿到大家眼中的宇宙工牌！先給大家曬一張工牌照： 4個月前，本人還在焦慮自己只是為正式員工打掃戰(zhàn)場的二等公民，鍵盤上的 CRUDer。這次成功的跳槽，讓我倍感幸運。 作為外派到花唄的外包碼農(nóng)，月薪 1...
-
Hive常用函數(shù)
1、解析URL字符串的： parse_url 用法： selectparse_url("",[HOST,PATH,QUERY,REF,PROTOCOL,FILE,AUTHOR...
-
YARN調(diào)度策略大揭秘YARN調(diào)度策略，即存在于resourceManager中, 主要為了進行資源的調(diào)度。一共有三大類調(diào)度器，分別是FIFO、 Capacity Scheduler和Fair S...
-
spark任務(wù)的提交流程（yarn）spark一般都是部署到y(tǒng)arn上使用的，所以就說y問的最多的就是arn的提交流程，兩種模式最大的區(qū)別就是driver端的執(zhí)行位置. Yarn Client模式 第一步，Dr...
-
修改網(wǎng)絡(luò)YUM源默認的系統(tǒng)YUM源，需要連接國外apache網(wǎng)站，網(wǎng)速比較慢，可以修改關(guān)聯(lián)的網(wǎng)絡(luò)YUM源為國內(nèi)鏡像的網(wǎng)站，比如網(wǎng)易163,aliyun等 安裝wget, wget用來從指定的...
-
面試必練：50道經(jīng)典SQL練習
--1.學生表--- Student(S,Sname,Sage,Ssex) --S 學生編號,Sname 學生姓名,Sage 出生年月,Ssex 學生性別--2.課程表 --...
-
-
數(shù)據(jù)倉庫的分層，你知道嗎？數(shù)據(jù)倉庫更多代表的是一種對數(shù)據(jù)的管理和使用的方式，它是一整套包括了數(shù)據(jù)建模、ETL（數(shù)據(jù)抽取、轉(zhuǎn)換、加載）以及作用調(diào)度等在內(nèi)的完整的理論體系流程。 數(shù)據(jù)倉庫在構(gòu)建過程中通常都...
-
Zookeeper內(nèi)部原理節(jié)點類型 stat結(jié)構(gòu)體 czxid-創(chuàng)建節(jié)點的事務(wù)zxid：每次修改ZooKeeper狀態(tài)都會收到一個zxid形式的時間戳，也就是ZooKeeper事務(wù)ID。 事務(wù)ID是Z...
-
一個可以走向巔峰的Git小提示
和大家聊到了個小“bug”，整理個筆記方便記錄 咱們一般默認的步驟都是先把遠程倉庫復(fù)制到本地，然后編輯配置文件，進行推送，同步等相關(guān)的操作 上面這個大家都很熟悉了，但是往往不...
-
Phoenix實戰(zhàn)1.1 Phoenix定義 Phoenix是HBase的開源SQL皮膚?？梢允褂脴藴蔎DBC API代替HBase客戶端API來創(chuàng)建表，插入數(shù)據(jù)和查詢HBase數(shù)據(jù)。 1.2...
-
如何選擇SparkSQL中的Join策略在大數(shù)據(jù)分析中，將兩個數(shù)據(jù)集進行 Join 操作是很常見的場景。在 Spark 的物理計劃階段，Spark 的 Join Selection 類會根據(jù) Join hints ...
-
Zookeeper安裝本地模式安裝部署 安裝前準備 安裝jdk，拷貝zookeeper安裝包到linux系統(tǒng)下，解壓到指定的目錄 tar -zxvf zookeeper-3.5.7.tar.gz ...
-
IDEA導(dǎo)入源碼包
選擇某個java類，Ctrl+鼠標左鍵選中某個類名，比如Reducer，然后就進入到源碼了。如果沒有導(dǎo)入源碼，會進入到一個class文件，這里可以選擇右側(cè)的Choose So...
-
Phoenix創(chuàng)建Hbase二級索引
1. Phoenix簡介 1.1 Phoenix定義 Phoenix是HBase的開源SQL皮膚?？梢允褂脴藴蔎DBC API代替HBase客戶端API來創(chuàng)建表，插入數(shù)據(jù)和查...
-
談Hadoop 3.x 新特性
Hadoop3.x中增強了很多特性，在Hadoop3.x中，不再允許使?jdk1.7，要求必須是jdk1.8以上版本。這是因為Hadoop 2.0是基于JDK 1.7開發(fā)的，...
