發(fā)簡信
IP屬地：廣東
-
MongoDB分片集群部署生產(chǎn)系統(tǒng)環(huán)境: CentOS7; MongoDB4.2 服務(wù)器規(guī)劃: 生產(chǎn)系統(tǒng)環(huán)境: CentOS7; MongoDB4.2 服務(wù)器規(guī)劃: 10...
-
理解NameNodeNameNode主要是用來保存HDFS的元數(shù)據(jù)信息，比如命名空間信息，塊信息等。當(dāng)它運行的時候，這些信息是存在內(nèi)存中的。但是這些信息也可以持久化...
-
Spark內(nèi)存空間管理
http://arganzheng.life/spark-executor-memory-management.html[http://arga...
-
Spark在Hadoop集群上運行時虛擬內(nèi)存超出限制
在內(nèi)網(wǎng)搭建了一套Hadoop，接著想在yarn上運行spark-shell，之前單機運行spark-shell沒有任何問題，但是當(dāng)跑到y(tǒng)arn集...
-
spark on yarn集群部署1. 機器規(guī)劃 IP地址hostname(主機名)身份10.213.50.94cnsz72vl0237NameNode、ResourceMana...
-
spark-3.0.0安裝教程
1. 安裝JDK1.8 有些系統(tǒng)默認安裝openjdk, 先卸載之，安裝標準的JDK1.8 ，使用該命令查看 openjdk的 安裝路徑, 查出...
-
hadoop-3.3.0安裝教程背景：部門要對接大數(shù)據(jù)部門那邊的交易流水?dāng)?shù)據(jù)，然后根據(jù)產(chǎn)品的特性統(tǒng)計分析等，應(yīng)用到自己部門的各個產(chǎn)品中（吐槽=_=!：為啥大數(shù)據(jù)部門不給幫忙做呢...
-
java 8 Collections 多字段排序
以前的做法： 多級排序（java 8） 通過以上例子我們可以發(fā)現(xiàn) Comparator.comparing(類::屬性一).reversed()...
-
spring-boot項目中使用單元測試spring-boot項目中使用單元測試？ pom.xml中引入spring-boot-starter-test包，目前項目已經(jīng)引入，無需重復(fù)<...
個人介紹
工作了好長一段時間，才發(fā)現(xiàn)自己的有道筆記堆滿了很多筆記，分享一些日常的筆記，希望幫到大家，由于工作忙，感興趣的可以聯(lián)系我，歡迎一起交流1508622779@qq.com