二進(jìn)制文件存儲(chǔ)或用一系列鍵值對(duì)標(biāo)識(shí)，很多種方法的，一般為了加密的原因，會(huì)用二進(jìn)制，別人看不到
Spark在美團(tuán)的實(shí)踐問(wèn)題導(dǎo)讀: 1、美團(tuán)離線計(jì)算平臺(tái)架構(gòu)都有那些框架？ 2、為什么要使用spark架構(gòu)？ 3、spark推廣過(guò)程中需要注意那些方面？ 前言 美團(tuán)是數(shù)據(jù)驅(qū)動(dòng)的互聯(lián)網(wǎng)服務(wù)，用戶每天在...
Scala 是一種有趣的語(yǔ)言。它一方面吸收繼承了多種語(yǔ)言中的優(yōu)秀特性，一方面又沒(méi)有拋棄 Java 這個(gè)強(qiáng)大的平臺(tái)，它運(yùn)行在 Java 虛擬機(jī)（Java Virtual Mac...
前面提到Scala比Java更加面向?qū)ο?，這是因?yàn)镾cala不允許類(lèi)保護(hù)靜態(tài)元素(靜態(tài)變量或靜態(tài)方法）。在Scala中提供類(lèi)似功能的是成為“Singleton（單例對(duì)象）“的...
有了前面的Scala基礎(chǔ)，從本篇開(kāi)始由淺到易逐步介紹Scala編程的各個(gè)方面，博客不可能做到面面俱到，還是希望你有些編程基礎(chǔ)，尤其是有些面向?qū)ο蟮木幊袒A(chǔ)，如Java，C++...
本篇繼續(xù)上一篇對(duì)Scala的整體介紹，本篇進(jìn)一步解釋Scala的一些高級(jí)特性，當(dāng)你學(xué)完本篇后，就有足夠的知識(shí)編寫(xiě)一些實(shí)用的Scala腳本應(yīng)用了。 第七步：使用類(lèi)型參數(shù)化數(shù)組 ...
Scala 是一門(mén)多范式（multi-paradigm）的編程語(yǔ)言，設(shè)計(jì)初衷是要集成面向?qū)ο缶幊毯秃瘮?shù)式編程的各種特性。 Scala 運(yùn)行在Java虛擬機(jī)上，并兼容現(xiàn)有的Ja...
問(wèn)題導(dǎo)讀 1.UDF對(duì)spark sql的作用是什么？ 2.用Scala編寫(xiě)的UDF與普通的Scala函數(shù)唯一的區(qū)別在什么地方？ 3.如何在spark中使用UDF？ 在數(shù)據(jù)分...
隨著存儲(chǔ)數(shù)據(jù)信息量的飛速增長(zhǎng)，越來(lái)越多的人開(kāi)始關(guān)注存儲(chǔ)數(shù)據(jù)的縮減方法。數(shù)據(jù)壓縮、單實(shí)例存儲(chǔ)和重復(fù)數(shù)據(jù)刪除等都是經(jīng)常使用的存儲(chǔ)數(shù)據(jù)縮減技術(shù)。 重復(fù)數(shù)據(jù)刪除往往是指消除冗余子文件...
問(wèn)題導(dǎo)讀: 1、美團(tuán)離線計(jì)算平臺(tái)架構(gòu)都有那些框架？ 2、為什么要使用spark架構(gòu)？ 3、spark推廣過(guò)程中需要注意那些方面？ 前言 美團(tuán)是數(shù)據(jù)驅(qū)動(dòng)的互聯(lián)網(wǎng)服務(wù)，用戶每天在...
