簡(jiǎn)介 由于計(jì)算機(jī)存儲(chǔ)的規(guī)則所致,有些時(shí)候浮點(diǎn)數(shù)存入和讀取出來(lái)的值并不相等,同樣的數(shù)據(jù)用單精度(float)和用雙精度(double)存儲(chǔ),獲取出來(lái)的值也會(huì)有差異。所以,當(dāng)我們...
簡(jiǎn)介 由于計(jì)算機(jī)存儲(chǔ)的規(guī)則所致,有些時(shí)候浮點(diǎn)數(shù)存入和讀取出來(lái)的值并不相等,同樣的數(shù)據(jù)用單精度(float)和用雙精度(double)存儲(chǔ),獲取出來(lái)的值也會(huì)有差異。所以,當(dāng)我們...
新歲,王自青歸,奉上令同張為某司之急務(wù)。組會(huì)報(bào)近日所成,上贊之。張甚不平,忿然曰:此數(shù)日吾為之多,汝所為甚少。淺言劃水者獲譽(yù),勠力勞苦者無(wú)聞,何也? 對(duì)曰:上言某過(guò),非真某之...
一、數(shù)據(jù)倉(cāng)庫(kù)概念 數(shù)據(jù)倉(cāng)庫(kù)(Data Warehouse)簡(jiǎn)稱(chēng)DW或DWH,是數(shù)據(jù)庫(kù)的一種概念上的升級(jí),可以說(shuō)是為滿(mǎn)足新需求設(shè)計(jì)的一種新數(shù)據(jù)庫(kù),而這個(gè)數(shù)據(jù)庫(kù)是需容納更多的數(shù)據(jù)...
1. 什么是Hadoop 大數(shù)據(jù)處理的分布式系統(tǒng) 2. Hadoop****生態(tài)圈 三大核心: HDFS集群:分布式文件存儲(chǔ)系統(tǒng) YARN集群:運(yùn)算資源調(diào)度 MapReduc...
1. Kafka Kafka 是一種高吞吐量、分布式、基于發(fā)布/訂閱的消息系統(tǒng),最初由 LinkedIn 公司開(kāi)發(fā),使用 Scala語(yǔ)言編寫(xiě),目前是Apache的開(kāi)源項(xiàng)目。 ...
基礎(chǔ)hash元素 核心屬性分析 構(gòu)造方法 求Hash值 put() putVal() resize() 重點(diǎn)! get() getNode() remove() repal...
一、接口繼承關(guān)系和實(shí)現(xiàn) 集合類(lèi)存放于Java.util包中,主要有3種:set(集)、list(列表包含Queue)和map(映射)。1. Collection:Collec...
1. HDFS: HDFS:Hadoop Distributed File System Hadoop 分布式文件系統(tǒng) 優(yōu)點(diǎn): 存儲(chǔ)海量數(shù)據(jù):HDFS可橫向擴(kuò)展,其存儲(chǔ)的文件...
一、幾種IO模型 1.阻塞IO模型(我就死等) 最傳統(tǒng)的一種IO模型,即在讀寫(xiě)數(shù)據(jù)過(guò)程中會(huì)發(fā)生阻塞現(xiàn)象。 當(dāng)用戶(hù)線(xiàn)程發(fā)出IO請(qǐng)求之后,內(nèi)核會(huì)去查看數(shù)據(jù)是否就緒,如果沒(méi)有就緒就...
NoSQL介紹和redis介紹 not only SQL:非關(guān)系型數(shù)據(jù)庫(kù); 作用:應(yīng)用于海量數(shù)據(jù)用戶(hù)數(shù)據(jù)的前提下的數(shù)據(jù)處理問(wèn)題。特征:可擴(kuò)容;可伸縮;大數(shù)據(jù)量下高性能;靈活的...
1.什么是Spark?Spark 大規(guī)模數(shù)據(jù)處理的快速通用的計(jì)算引擎。Spark來(lái)源于Hadoop MapReduce,同時(shí)Job中間輸出結(jié)果可以保存在內(nèi)存中,從而不再需要讀...
本文僅作為筆者學(xué)習(xí)記錄之用,侵刪原文:https://www.cnblogs.com/CodeBear/p/10911177.html 緩存穿透 我們經(jīng)常會(huì)把一部分?jǐn)?shù)據(jù)放在R...
原文:https://mp.weixin.qq.com/s/gAwe56D3a5uNJYvxKC1t-Q 概述 在官方文檔中是這樣描述HashMap的: 基于Map接口實(shí)現(xiàn)、...
原文:https://www.cnblogs.com/xdecode/p/9321848.html 最近在整理數(shù)據(jù)結(jié)構(gòu)方面的知識(shí), 系統(tǒng)化看了下Java中常用數(shù)據(jù)結(jié)構(gòu), 突發(fā)...
Shuffle簡(jiǎn)介 Shuffle的本意是洗牌、混洗的意思,把一組有規(guī)則的數(shù)據(jù)盡量打亂成無(wú)規(guī)則的數(shù)據(jù)。而在MapReduce中,Shuffle更像是洗牌的逆過(guò)程,指的是將ma...
作為互聯(lián)網(wǎng)從業(yè)人員,目前看來(lái)對(duì)數(shù)據(jù)指標(biāo)、指標(biāo)的運(yùn)用還是需要再深入學(xué)習(xí)下。 一、常見(jiàn)指標(biāo) 先來(lái)看一看常見(jiàn)的一些數(shù)據(jù)指標(biāo)們 1、DAU:Daily Active User 日活躍...
本文僅為筆者平日學(xué)習(xí)記錄之用,侵刪原文:https://mp.weixin.qq.com/s/gPx6q1pZRAuQuJslLER4Mg Flink任務(wù)常見(jiàn)的提交方式通過(guò)f...
本文僅為筆者平日學(xué)習(xí)記錄之用,侵刪原文:https://mp.weixin.qq.com/s/MWBoBPVhiB4VgpchtR6_nQ 在Flink1.10任務(wù)提交流程分...
本文僅為筆者平日學(xué)習(xí)記錄之用,侵刪原文:https://mp.weixin.qq.com/s/TUFNictt8XXLmmyWlfnj4g 讓分布式系統(tǒng)的操作變得簡(jiǎn)單,在某種...
原文:https://mp.weixin.qq.com/s/mwCfqjhgqU98LR315GZTpg 前言 Redis是目前最火爆的內(nèi)存數(shù)據(jù)庫(kù)之一,通過(guò)在內(nèi)存中讀寫(xiě)數(shù)據(jù),...