這里將持續(xù)更新大數(shù)據(jù)、人工智能相關(guān)技術(shù)的博文，喜歡的朋友請(qǐng)為我點(diǎn)贊！
發(fā)簡(jiǎn)信
IP屬地：廣東
-
-
現(xiàn)在北京發(fā)展，在核桃編程負(fù)責(zé)Scratch產(chǎn)品線的課程設(shè)計(jì)<br><br>一直專注于 少兒編程和 steam 內(nèi)容，關(guān)注和參與少兒編程教育行業(yè)的發(fā)展<br><br>歡迎關(guān)注我的知乎專欄：<a href="https://links.jianshu.com/go?to=https%3A%2F%2Fzhuanlan.zhihu.com%2Fkidscode" target="_blank">https://zhuanlan.zhihu.com/kidscode</a><br><br>我的微信公眾號(hào)：少兒編程許毅松<br>免費(fèi)交流群：<a href="https://links.jianshu.com/go?to=https%3A%2F%2Ft.zsxq.com%2FvFIIYvr" target="_blank">https://t.zsxq.com/vFIIYvr</a><br>不定期分享對(duì)于行業(yè)的思考
-
啟動(dòng)hadoop時(shí)，datanode未能正常啟動(dòng)
啟動(dòng)hdfs時(shí)，查看進(jìn)程發(fā)現(xiàn)沒有datanode進(jìn)程 嘗試單獨(dú)啟動(dòng)datanode，發(fā)現(xiàn)還是不行 然后到hadoop日志目錄下查看datanode得日志信息報(bào)錯(cuò)信息如下： 此...
-
hdfs ha腳本郵件預(yù)警failover
1.腳本編寫 1.1.執(zhí)行腳本 此時(shí)hdfs ha沒有產(chǎn)生failover，所以僅僅是打印了集群hdfs ha狀態(tài) 2.模擬failover 此時(shí)再次執(zhí)行 get_hdfs_...
-
mail 465郵件配置1.開啟QQ郵箱SMTP服務(wù) 然后點(diǎn)擊圖片右下角生成授權(quán)碼 ，獲取到授權(quán)碼 2.停止服務(wù) 此操作是在root用戶下進(jìn)行 3.啟動(dòng)postfix服務(wù) 此操作是在root用戶下進(jìn)...
-
shell腳本編程(進(jìn)階)
以三臺(tái)機(jī)器搭建的集群為例 1.查看三臺(tái)機(jī)器的進(jìn)程 2.拷貝文件腳本 3.啟動(dòng)集群shell腳本 3.1 編寫啟動(dòng)腳本 3.2 執(zhí)行腳本并查看進(jìn)程 3.2.1 排查集群未啟動(dòng)成...
-
shell腳本編程(基礎(chǔ))
輸出字符串hello world shell debug模式 變量定義與引用 ?? 注意點(diǎn) = 前后不能有空格變量名稱一般為大寫調(diào)用變量最好使用{} 例如：${date1}字...
-
-
HDFS Yarn HA架構(gòu)圖及架構(gòu)區(qū)別HDFS HA架構(gòu)圖 1.各組件說明 active nn(NameNode) 接收client的rpc請(qǐng)求并處理，同時(shí)自己editlog寫一份，也向JN的共享存儲(chǔ)上的edit...
-
Hadoop集群搭建1.組件版本 2.組件安裝與配置 2.1.添加hadoop用戶并創(chuàng)建目錄 以ruozedata001機(jī)器為示例，ruozedata002/ruozedata003兩臺(tái)操作一致...
-
YARN調(diào)度器種類與區(qū)別三種調(diào)度器 1.FIFO調(diào)度器(FIFO Scheduler)2.容量調(diào)度器(Capacity Scheduler)3.公平調(diào)度器(Fair Scheduler) 三種調(diào)度器...
-
spark2.4.2源碼編譯集成hadoop-2.6.0-cdh5.15.1
1.準(zhǔn)備工作 1.1 組件及源碼下載 ?? 版本要求：JDK1.8+，maven3.5.4+，scala 2.11.+ 1.2 環(huán)境搭建同：hadoop-2.6.0-cdh5...
-
hadoop-2.6.0-cdh5.15.1源碼編譯1.前期準(zhǔn)備工作 1.1 組件及源碼下載 ?? 編譯該版本源碼需要jdk1.7 1.2 安裝必要工具 1.3 安裝必要的依賴庫 1.4 上傳壓縮包并解壓縮配置環(huán)境 這里沒有添...
-
適合練習(xí)的10個(gè)Python項(xiàng)目，每個(gè)項(xiàng)目都不到500行代碼
以下10個(gè)練手項(xiàng)目均摘錄自一本尚未出版的 Python 神書《500 Lines or Less》，盡管沒有出版，但其 review 版已在官方博客放出。 1. 實(shí)現(xiàn)一個(gè)網(wǎng)絡(luò)...
