基于Spring boot創(chuàng)建了最簡單Spring Security配置環(huán)境,一切都在pom中 以jar包形式運行 以war包形式運行 **創(chuàng)建Security配置類 @En...
前言 為什么要使用圖床呢? 因為在不同平臺發(fā)布同一篇文章的時候,最一個痛苦的點就是,圖片存儲問題,各個平臺的文件存儲方式各不相同,無法直接 Ctrl + C 的方式一鍵搞定,...
一. 托管State 1.1 主程序 構(gòu)建 StreamExecutionEnvironment; 啟動 Checkpoint,并設(shè)置間隔時間; 設(shè)置 StateBacken...
本文主要介紹如何使用 FLink SQL 自己的 DDL語言來構(gòu)建基于 kafka 的表和 基于Mysql 的表,并直接把從 kafka 接過來的 Json 格式的數(shù)據(jù)轉(zhuǎn)換為...
最近在學(xué)習(xí)clickhouse,在單機版上玩了一段時間之后,決定搭建clickhouse cluster。我買了4臺intel的nuc,型號是6CAYH,每臺機器8G內(nèi)存,h...
Clickhouse是一個用于聯(lián)機分析處理(OLAP)的列式數(shù)據(jù)庫管理系統(tǒng)(columnar DBMS)。傳統(tǒng)數(shù)據(jù)庫在數(shù)據(jù)大小比較小,索引大小適合內(nèi)存,數(shù)據(jù)緩存命中率足夠高的...
1、WAL:write-ahead log 預(yù)寫日志 災(zāi)難恢復(fù),一旦服務(wù)器崩潰,通過重放log,即可恢復(fù)之前的數(shù)據(jù)(內(nèi)存中還沒有刷寫到磁盤的數(shù)據(jù));如果寫入wal操作失敗,整...
隨著大數(shù)據(jù)的發(fā)展,flink也變得越來越火。于是我決定開始學(xué)習(xí)flink。flink本身對java, scala和python提供了支持。作為一個Pythonista,按道理...
在項目中如果要實現(xiàn)全文檢索,最普通的方法就是通過數(shù)據(jù)庫查詢語句like '%keywords%',但是這種方法在數(shù)據(jù)量多的情況下效率很低。目前最主流的方法是集成一個搜索引擎,...
最近開始學(xué)習(xí)scala,然后寫了幾個練手的程序,在scala下也能跑的起來。 但是在某些沒有安裝scala的主機上,又遇到不愿意安裝scala的,就只能用java跑了。 這里...
摘要:大數(shù)據(jù)門檻較高,僅僅環(huán)境的搭建可能就要耗費我們大量的精力,本文總結(jié)了作者是如何搭建大數(shù)據(jù)環(huán)境的(單機版和集群版),希望能幫助學(xué)弟學(xué)妹們更快地走上大數(shù)據(jù)學(xué)習(xí)之路。 0. ...
說明 認證(authentication):驗證用戶所用的身份是否是對的 授權(quán)(authorization):驗證用戶所用身份操作是否有權(quán)限 目前hive(版本0.12.0)...