namenode.yaml startDelaySeconds: 0 hostPort: 192.168.12.131:1234 name: NameNode rules: ...
發(fā)簡(jiǎn)信
IP屬地：北京
-
2024-05-08 hadoop 配置 version=1
-
2024-05-08 hive創(chuàng)建分區(qū)外表
1.建表 drop table if exists ods.ods_t_aircompany_inc_day; CREATE EXTERNAL TABLE IF NOT EX...
-
2024-03-18 修改hadoop備份數(shù)
１：hadoop中備份數(shù)設(shè)置：(hdfs-site.xml) dfs.replication 3 ２：hadoop中備份數(shù)修改： hadoop dfs -setrep [-R...
-
2024-03-12 linux 查看當(dāng)前目錄下文件or文件夾大小
du -sch * 124M code_spider 2.9G datanebula 1.1G installpackage 294M lianpengtao 118G mo...
-
2024-02-19解決macbook不能自動(dòng)更新時(shí)間的終極解決辦法
控制臺(tái)輸入 sudo sntp -sS time.apple.com && date
-
-
2024-02-02 mysql dump 和 mysql 執(zhí)行sql文件
## dump mysql庫(kù) mysqldump -u root -p --databases datanebula_center > /tmp/datanebula_cen...
-
2024-02-01 CentOS7下mysql8修改datadir之后不能啟動(dòng)
嘗試修改了mysql的datadir參數(shù)， 同時(shí)將數(shù)據(jù)文件拷貝到了新的目錄/data下， 但是啟動(dòng)mysql服務(wù)時(shí)，提示： [root@mysql8-01 data]# sy...
-
2024-02-01 ERROR 2002 (HY000): Can‘t connect to local MySQL server through socket ‘/var/lib/mysql...1. 錯(cuò)誤產(chǎn)生[https://blog.csdn.net/weixin_45777669/article/details/115671283#1__2] 2. 錯(cuò)誤產(chǎn)生原因...
-
2024-01-26 【DataX實(shí)戰(zhàn)】DataX同步ClickHouse數(shù)據(jù)到Hive
【DataX實(shí)戰(zhàn)】DataX同步ClickHouse數(shù)據(jù)到Hive 1.準(zhǔn)備數(shù)據(jù) 1.1 clickhouse建表并插入數(shù)據(jù) CREATE TABLE cell_towers...
-
2024-01-23 ntpd 集群時(shí)間同步3.2.11集群時(shí)間同步 如果服務(wù)器在公網(wǎng)環(huán)境（能連接外網(wǎng)），可以不采用集群時(shí)間同步，因?yàn)榉?wù)器會(huì)定期和公網(wǎng)時(shí)間進(jìn)行校準(zhǔn)； 如果服務(wù)器在內(nèi)網(wǎng)環(huán)境，必須要配置集群時(shí)間同步，否則...
-
2023-12-22 創(chuàng)建服務(wù)端git倉(cāng)庫(kù)
1. 創(chuàng)建新用戶(hù) useradd tesla 2. 修改密碼 passwd tesla 3. 修改/etc/sudoers 找到 root ALL=(ALL) ALL ...
-
2023-09-22 shell中各種括號(hào)()、(())、[]、[[]]、{}的作用和區(qū)別
shell中各種括號(hào)()、(())、[]、[[]]、{}的作用和區(qū)別 一、小括號(hào)，圓括號(hào)（） 1、單小括號(hào) () ①命令組。括號(hào)中的命令將會(huì)新開(kāi)一個(gè)子shell順序執(zhí)行，所以...
-
2023-09-20 spark on hive & hive on spark大數(shù)據(jù)Hadoop之——Spark on Hive 和 Hive on Spark的區(qū)別與實(shí)現(xiàn)https://baijiahao.baidu.com/s?id=1757731...
-
2023-09-18 echo輸出帶顏色的字體
echo輸出帶顏色的字體 https://hellogitlab.com/OS/Centos/X_echo_color_font.html#%E6%97%A5%E5%BF%9...
-
2023-09-13 centos間自動(dòng)同步腳本
#!/bin/bash #1. 判斷參數(shù)個(gè)數(shù) if [ $# -lt 1 ] then echo Error: Not Enough Arguement! exit;...
-
centos7 新加磁盤(pán) 磁盤(pán)掛載
一、當(dāng)硬盤(pán)小于等于2T時(shí)，可以用fdisk進(jìn)行掛載 fdisk /dev/sdb 1、查看幫助。 輸入：m 2、新建分區(qū)。 輸入：n 3、創(chuàng)建邏輯分區(qū) 輸入：p 4、輸入分區(qū)...
-
2023-04-13 處理數(shù)據(jù)傾斜
INSERT OVERWRITE TABLE fin_dw.dwd_cdplabel_jt_market_strategy_info_pda PARTITION (pday=...
-
distribute by rand
distribute by rand的風(fēng)險(xiǎn)： distribute by rand這樣的使用場(chǎng)景，使用不帶隨機(jī)種子的函數(shù)，在mapreduce框架下這種使用方式存在一定風(fēng)險(xiǎn)，...