工作中經(jīng)常遇到的shell整理如下: 1.shell腳本傳入時(shí)間參數(shù)并判斷 2.查找文件并拷貝 3.刪除包含指定字符串的行 4.時(shí)間戳轉(zhuǎn)換為時(shí)間格式 5.獲取時(shí)間戳（納秒） ...
發(fā)簡(jiǎn)信
IP屬地：安徽
-
JDBC連接hive導(dǎo)入、查詢數(shù)據(jù)
說明 官網(wǎng)鏈接：https://cwiki.apache.org/confluence/display/Hive/HiveServer2+Clients#HiveServer...
-
新手如何快速搭建hadoop集群
說明：所有的啟動(dòng)所需的文件(docker-compose.yml和hadoop.env)必須在同一個(gè)目錄下否則docker compose找不到報(bào)錯(cuò)，hadoop目錄可以自定...
-
hive udf 函數(shù)：MD5
利用 hive 做數(shù)據(jù)查詢或者分析的時(shí)候，原生的 hive 函數(shù)可能無(wú)法滿足我們的需求，這時(shí)候我們可以自定義 hive udf,函數(shù)； 自定義 hive udf 函數(shù)，有以下...
-
Mac忘記mysql登錄密碼
默認(rèn)mysql配置文件在/etc/my.cnf，sudo root賬號(hào)找到[mysqld]添加skip-grant-tables（Mac安裝Mysql5.7請(qǐng)戳 https:...
-
Mac安裝Mysql5.7下載Mysql，進(jìn)入下載頁(yè)面https://dev.mysql.com/downloads/ image.png 選擇相應(yīng)的操作系統(tǒng)及版本image.png3.下載ima...
-
Mac上Idea重裝后打不開的解決辦法解決步驟 查找問題Finder -> Application -> 右鍵“show package contents” -> Contents -> MacOS -> 雙擊"...
-
CDH集群添加節(jié)點(diǎn)背景 剛來到公司就緊急接手CDH運(yùn)維的工作，由于本人從未從事過運(yùn)維相關(guān)工作磕磕絆絆到現(xiàn)在也已將近1年，最近才有時(shí)間把遇到過的問題寫下來，記錄下來算是留點(diǎn)東西。 分步指南 1....
-
-
MAC本地搭建Hadoop、Hbase、kafka、zookeeper環(huán)境背景 由于項(xiàng)目中需要用到實(shí)時(shí)處理框架，基于現(xiàn)有架構(gòu)選擇spark streaming消費(fèi)kafka使用scala語(yǔ)言進(jìn)行開發(fā)。出于服務(wù)器資源緊張以及登錄測(cè)試服務(wù)器需要?jiǎng)討B(tài)驗(yàn)證...
