簡介 由于計算機存儲的規(guī)則所致,有些時候浮點數(shù)存入和讀取出來的值并不相等,同樣的數(shù)據(jù)用單精度(float)和用雙精度(double)存儲,獲取出來的值也會有差異。所以,當我們...
簡介 由于計算機存儲的規(guī)則所致,有些時候浮點數(shù)存入和讀取出來的值并不相等,同樣的數(shù)據(jù)用單精度(float)和用雙精度(double)存儲,獲取出來的值也會有差異。所以,當我們...
新歲,王自青歸,奉上令同張為某司之急務。組會報近日所成,上贊之。張甚不平,忿然曰:此數(shù)日吾為之多,汝所為甚少。淺言劃水者獲譽,勠力勞苦者無聞,何也? 對曰:上言某過,非真某之...
一、數(shù)據(jù)倉庫概念 數(shù)據(jù)倉庫(Data Warehouse)簡稱DW或DWH,是數(shù)據(jù)庫的一種概念上的升級,可以說是為滿足新需求設計的一種新數(shù)據(jù)庫,而這個數(shù)據(jù)庫是需容納更多的數(shù)據(jù)...
1. 什么是Hadoop 大數(shù)據(jù)處理的分布式系統(tǒng) 2. Hadoop****生態(tài)圈 三大核心: HDFS集群:分布式文件存儲系統(tǒng) YARN集群:運算資源調度 MapReduc...
1. Kafka Kafka 是一種高吞吐量、分布式、基于發(fā)布/訂閱的消息系統(tǒng),最初由 LinkedIn 公司開發(fā),使用 Scala語言編寫,目前是Apache的開源項目。 ...
基礎hash元素 核心屬性分析 構造方法 求Hash值 put() putVal() resize() 重點! get() getNode() remove() repal...
一、接口繼承關系和實現(xiàn) 集合類存放于Java.util包中,主要有3種:set(集)、list(列表包含Queue)和map(映射)。1. Collection:Collec...
1. HDFS: HDFS:Hadoop Distributed File System Hadoop 分布式文件系統(tǒng) 優(yōu)點: 存儲海量數(shù)據(jù):HDFS可橫向擴展,其存儲的文件...
一、幾種IO模型 1.阻塞IO模型(我就死等) 最傳統(tǒng)的一種IO模型,即在讀寫數(shù)據(jù)過程中會發(fā)生阻塞現(xiàn)象。 當用戶線程發(fā)出IO請求之后,內核會去查看數(shù)據(jù)是否就緒,如果沒有就緒就...
NoSQL介紹和redis介紹 not only SQL:非關系型數(shù)據(jù)庫; 作用:應用于海量數(shù)據(jù)用戶數(shù)據(jù)的前提下的數(shù)據(jù)處理問題。特征:可擴容;可伸縮;大數(shù)據(jù)量下高性能;靈活的...
1.什么是Spark?Spark 大規(guī)模數(shù)據(jù)處理的快速通用的計算引擎。Spark來源于Hadoop MapReduce,同時Job中間輸出結果可以保存在內存中,從而不再需要讀...
本文僅作為筆者學習記錄之用,侵刪原文:https://www.cnblogs.com/CodeBear/p/10911177.html 緩存穿透 我們經常會把一部分數(shù)據(jù)放在R...
原文:https://mp.weixin.qq.com/s/gAwe56D3a5uNJYvxKC1t-Q 概述 在官方文檔中是這樣描述HashMap的: 基于Map接口實現(xiàn)、...
原文:https://www.cnblogs.com/xdecode/p/9321848.html 最近在整理數(shù)據(jù)結構方面的知識, 系統(tǒng)化看了下Java中常用數(shù)據(jù)結構, 突發(fā)...
Shuffle簡介 Shuffle的本意是洗牌、混洗的意思,把一組有規(guī)則的數(shù)據(jù)盡量打亂成無規(guī)則的數(shù)據(jù)。而在MapReduce中,Shuffle更像是洗牌的逆過程,指的是將ma...
作為互聯(lián)網從業(yè)人員,目前看來對數(shù)據(jù)指標、指標的運用還是需要再深入學習下。 一、常見指標 先來看一看常見的一些數(shù)據(jù)指標們 1、DAU:Daily Active User 日活躍...
本文僅為筆者平日學習記錄之用,侵刪原文:https://mp.weixin.qq.com/s/gPx6q1pZRAuQuJslLER4Mg Flink任務常見的提交方式通過f...
本文僅為筆者平日學習記錄之用,侵刪原文:https://mp.weixin.qq.com/s/MWBoBPVhiB4VgpchtR6_nQ 在Flink1.10任務提交流程分...
本文僅為筆者平日學習記錄之用,侵刪原文:https://mp.weixin.qq.com/s/TUFNictt8XXLmmyWlfnj4g 讓分布式系統(tǒng)的操作變得簡單,在某種...
原文:https://mp.weixin.qq.com/s/mwCfqjhgqU98LR315GZTpg 前言 Redis是目前最火爆的內存數(shù)據(jù)庫之一,通過在內存中讀寫數(shù)據(jù),...