Hive簡(jiǎn)介 什么是hive hive是基于Hadoop的一個(gè)數(shù)據(jù)倉(cāng)庫(kù)工具,并不是一個(gè)數(shù)據(jù)庫(kù)。用來(lái)進(jìn)行數(shù)據(jù)提取、轉(zhuǎn)化、加載,這是一種可以存儲(chǔ)、查...
RDD序列化 閉包檢查 Kryo序列化框架 Java的序列化能夠序列化任何的類(lèi)。單比較重(字節(jié)多),序列化后,對(duì)象的提交也比較大。Spark2....
工作機(jī)制 zk從設(shè)計(jì)模式角度理解:是一個(gè)基于觀察者模式的分布式服務(wù)管理框架,它負(fù)責(zé)存儲(chǔ)和管理大家都關(guān)心的數(shù)據(jù),然后接受觀察者的注冊(cè),一旦數(shù)據(jù)狀態(tài)...
1-獲取集合長(zhǎng)度-list.length 2-獲取集合大小-list.size 3-循環(huán)遍歷-foreach 4-迭代器-list.iterat...
普通匹配 匹配常量;類(lèi)型;模式守衛(wèi) 匹配數(shù)組 匹配列表 方式二(方式一與匹配數(shù)組相同) 匹配元組 元組特殊匹配 1)在變量聲明時(shí)匹配 2)for...
1)sacla集合有三大類(lèi):序列Seq,集Set,映射Map。所有集合都擴(kuò)展自Iterable特質(zhì)。2)對(duì)于幾乎所有集合類(lèi),scala都提供了可...
函數(shù)參數(shù) 1.可變參數(shù)(多個(gè)參數(shù)時(shí),可變參數(shù)一般放置在最后) 2.參數(shù)默認(rèn)值,一般有默認(rèn)值的參數(shù)放在后面 3.帶名參數(shù) 至簡(jiǎn)原則 1.retur...
一些基礎(chǔ) 變量和常量( 1)聲明變量時(shí),類(lèi)型可以省略,編譯器自動(dòng)推導(dǎo),即類(lèi)型推導(dǎo)( 2)類(lèi)型確定后,就不能修改,說(shuō)明 Scala 是強(qiáng)數(shù)據(jù)類(lèi)型語(yǔ)...