There is only one God and his name is Death. <br>And there is only one thing we say to Death: <br>Not today.
發(fā)簡(jiǎn)信
IP屬地：上海
-
視頻統(tǒng)計(jì)平臺(tái)的架構(gòu)設(shè)計(jì) 這個(gè)你還沒出呢
大數(shù)據(jù)之用戶視頻觀看時(shí)長(zhǎng)的數(shù)據(jù)統(tǒng)計(jì)(一)
最近接手了一個(gè)關(guān)于中學(xué)生家庭視頻教育的項(xiàng)目，其中核心的部分要求統(tǒng)計(jì)用戶的視頻看時(shí)長(zhǎng)，并且管理員可以分別查看某一地區(qū)或者學(xué)校總的觀看時(shí)長(zhǎng)以及上月或上周的觀看時(shí)長(zhǎng)，并且視頻的觀看...
-
多線程基礎(chǔ)撿漏以前學(xué)習(xí)拿出來(lái)記錄下，后面分享大數(shù)據(jù)相關(guān)的技術(shù) 一、程序、進(jìn)程、線程 1. 程序(program) 概念：是為完成特定任務(wù)、用某種語(yǔ)言編寫的一組指令的集合。即指一段靜態(tài)的代碼...
-
Flink-Streaming-算子學(xué)習(xí)-01
概述 系統(tǒng)的學(xué)習(xí)一下flink的streaming 算子操作，學(xué)習(xí)一下新的技術(shù)，增加一下個(gè)人的技術(shù)棧儲(chǔ)備，java/scala的api； Flink流式算子api官網(wǎng)連接：D...
-
spark-sql跑任務(wù)報(bào)錯(cuò)org.apache.spark.shuffle.MetadataFetchFailedException: Missing an output location f...
spark-SQL跑任務(wù)報(bào)錯(cuò) 錯(cuò)誤信息如下 解決方案： 增加executor內(nèi)存，把spark.executor.memory由10G調(diào)到20G就不出現(xiàn)這個(gè)異常了 原因分析 ...
-
數(shù)倉(cāng)入門基礎(chǔ)-3-數(shù)倉(cāng)方法論三范式（3NF）： 第一范式[https://baike.baidu.com/item/%E7%AC%AC%E4%B8%80%E8%8C%83%E5%BC%8F]（1NF）...
-
11111
關(guān)于改變自己的問(wèn)題
如何改變別人對(duì)自己學(xué)生打扮和氣場(chǎng)的感覺 如果人是一個(gè)公司應(yīng)該如何像經(jīng)營(yíng)公司一樣經(jīng)營(yíng)自己 如何提高自己的積極性，多總結(jié)
-
數(shù)據(jù)倉(cāng)庫(kù)理論第一炮男人的內(nèi)心都是很純潔的，風(fēng)騷起來(lái)恐怕受不了。作為數(shù)倉(cāng)的工作者,長(zhǎng)時(shí)間的與數(shù)據(jù)打交道，一股作氣寫sql。在Kimball和Inmon是兩種主流的數(shù)據(jù)倉(cāng)庫(kù)方法論，分別由 Ralp...
-
你改的哪個(gè)參數(shù)哥
關(guān)于Flume丟失數(shù)據(jù)
線上生產(chǎn)環(huán)境，經(jīng)常莫名其妙隔一段時(shí)間丟失文件末尾的一部分?jǐn)?shù)據(jù)??，很是尷尬，業(yè)務(wù)大致的流程如下： 數(shù)據(jù)收集服務(wù)將文件落地后，將會(huì)將體積超過(guò)1G的目前正在使用的文件及時(shí)移動(dòng)壓縮歸...
-
給力
數(shù)倉(cāng)--Hive-面試之Hive手寫SQL案例
既然是手寫代碼，那么就需要會(huì)手寫，手寫這個(gè)是重點(diǎn) 1-請(qǐng)?jiān)敿?xì)描述將一個(gè)有結(jié)構(gòu)的文本文件student.txt導(dǎo)入到一個(gè)hive表中的步驟，及其關(guān)鍵字 假設(shè)student.tx...
-
1.你對(duì)jvm的理解？jvm的虛擬機(jī)的有什么更新？
2.什么是oom？什么是statckoverflowerror有哪些方法分析？
3.參數(shù)調(diào)優(yōu)？
面試問(wèn)的問(wèn)題jvm從入門到放棄1
1.0類裝載子系統(tǒng)image.pngimage.png雙親委派機(jī)制：我爸是李干，有事找我爹![image.png]沙箱安全機(jī)制：image.png
-
總結(jié)的不完善僅僅是個(gè)人學(xué)習(xí)和記憶
jvm從入門到放棄1
1.0類裝載子系統(tǒng)image.pngimage.png雙親委派機(jī)制：我爸是李干，有事找我爹![image.png]沙箱安全機(jī)制：image.png
-
jvm從入門到放棄11.0類裝載子系統(tǒng)image.pngimage.png雙親委派機(jī)制：我爸是李干，有事找我爹![image.png]沙箱安全機(jī)制：image.png
-
學(xué)習(xí)pyspark
-
CentOS 7下使用yum安裝Mesos
參考Mesos官網(wǎng)，可以使用Mesos源碼安裝Mesos，這種方法安裝的Mesos配置成系統(tǒng)服務(wù)，比較麻煩，推薦使用yum安裝Mesos。由于默認(rèn)yum源中不包含 Mesos...
-
PySpark筆記(一)：Spark簡(jiǎn)介與安裝Apache Spark 是專為大規(guī)模數(shù)據(jù)處理而設(shè)計(jì)的快速通用的計(jì)算引擎。Spark是UC Berkeley AMP lab (加州大學(xué)伯克利分校的AMP實(shí)驗(yàn)室)所開源的類H...
