Elasticsearch是目前大數(shù)據(jù)領(lǐng)域最熱門的技術(shù)棧之一，經(jīng)過近8年的發(fā)展，已從0.0.X版升級(jí)至6.X版本，雖然增加了很多的特性和功能，但是在主體架構(gòu)上，還是沒有太多的...
發(fā)簡信
IP屬地：北京
-
Elasticsearch性能優(yōu)化總結(jié)
-
磚廠CEO Ali對(duì)Hadoop的最新評(píng)價(jià)
這個(gè)月，Hadoop又引爆了一輪討論。。。原本的三個(gè)Hadoop公司Cloudera，Hortonworks和MapR遇到了他們自己的危機(jī)，引發(fā)了對(duì)整個(gè)Hadoop未來命運(yùn)的...
-
使用ssh-copy-id i command not found
1,本地終端執(zhí)行以下命令 curl -L https://raw.githubusercontent.com/beautifulcode/ssh-copy-id-for-OS...
-
Centos 7.4 升級(jí) NTP 到 4.2.8p12 版本
升級(jí)ntp主要是為了解決系統(tǒng)安全問題： 因?yàn)? centos7.4系統(tǒng)中默認(rèn)安裝的是 ntp 4.2.6p5版本，但是此版本漏洞很多，很容易被攻擊導(dǎo)致無法...
-
SparkStreaming如何維護(hù)Kafka消息偏移量
SparkStreaming 維護(hù)Kafka 消息偏移量據(jù)個(gè)人了解有兩種方式 一、利用SparkStreaming 自帶的Checkpoint 方法來維護(hù) 二、自己來...
-
Centos-6.5配置本地yum源服務(wù)器相關(guān)配置 1.系統(tǒng)為：linux Centos6.5 2.用戶為： root 3.硬盤為： 大于50GB 4.內(nèi)存為： 大于1GB 安裝好系統(tǒng)確認(rèn)可...
-
MapReduce如何處理不可分割文件
有時(shí)會(huì)有這樣的邏輯需求，一個(gè) map 任務(wù)需要處理一個(gè)文件中的所有內(nèi)容或是 把整個(gè)文件作為一條記錄處理。 即使不分割文件，仍然需要一個(gè) RecordReader 來...
-
YARN中的資源調(diào)度
理想情況下，YARN 應(yīng)用發(fā)出資源請(qǐng)求時(shí)應(yīng)該立刻給予滿足。但是在實(shí)際生產(chǎn)環(huán)境中資源是有限的， 在一個(gè)繁忙的集群上，一個(gè)應(yīng)用經(jīng)常需要等待才能分配到所需要的資源。 YARN ...
