當(dāng)使用sparkstreaming處理流式數(shù)據(jù)的時(shí)候，它的數(shù)據(jù)源搭檔大部分都是Kafka，尤其是在互聯(lián)網(wǎng)公司頗為常見。 當(dāng)他們集成的時(shí)候我們需要重點(diǎn)考慮就是如果程序發(fā)生故障，...
發(fā)簡信
IP屬地：上海
-
關(guān)于SparkStreaming的checkpoint的弊端
-
hive sql數(shù)據(jù)分析面試整理
1.寫作目的說明 hive sql是從事數(shù)據(jù)分析的同學(xué)的基本功。無論是秋招、春招或者是實(shí)習(xí)，sql都是面試官考察的重點(diǎn)，拿剛剛過去的19秋招來說，搜狐、網(wǎng)易、京東等在數(shù)據(jù)分析...
-
Hbase問題匯總與解答
今天早上分享了下HBase，分享的時(shí)候同事提出了一些問題，可能大部分有有這樣的困惑，匯總下來： HBase問題匯總與解答 兩個(gè)獨(dú)立的服務(wù)器，一臺(tái)用HDFS，一臺(tái)不用HDFS可...
-
@Mr_Alfred 沒事，已經(jīng)解決了。。。
SparkSql 讀取文件/讀取hdfs文件
SparkSql 讀取文件/讀取hdfs文件 讀取本地： 讀取hdfs上的文件： 這兩個(gè)文件從hdfs配置文件中拿下來放在這里。
-
可以看一下 hdfs-site.xm跟core-site.xml這兩個(gè)配置文件的內(nèi)容嗎
SparkSql 讀取文件/讀取hdfs文件
SparkSql 讀取文件/讀取hdfs文件 讀取本地： 讀取hdfs上的文件： 這兩個(gè)文件從hdfs配置文件中拿下來放在這里。
-
學(xué)Git，為自己劉小澤寫于18.12.18-19了解到Git其實(shí)就是因?yàn)楹芗t的Github，但Git包含的東西比Github多多了。Git的魔力一直吸引著我，但目前還是只看到了Git的冰山一...
-
移動(dòng)端H5防劫持（防止廣告注入）
移動(dòng)端H5防劫持（防止廣告注入） 最近項(xiàng)目中自己的H5網(wǎng)頁出現(xiàn)了被劫持插入廣告的事件，看好趁著這個(gè)節(jié)點(diǎn)整理下H5被劫持的原因及防止劫持的方法。 原因： 經(jīng)過查找和調(diào)研市面上出...
-
nginx系列3——nginx反向代理、動(dòng)靜分離、負(fù)載均衡nginx反向代理、動(dòng)靜分離、負(fù)載均衡 反向代理 要說反向代理，我們就先要理解正向代理 ,下面我們就談?wù)務(wù)虼砗头聪虼戆伞?正向代理 一個(gè)位于客戶端和原始服務(wù)器(orig...
-
簡單粗暴使用git！使用 git 有三種方式，按照你的需求選擇1.只在本地使用2.將本地倉庫上傳到 GitHub3.下載 GitHub 上的倉庫 （提醒：使用前需先配置哦，參考 如何配置 Git...
-
Java架構(gòu)想進(jìn)階的加QQ：2954948836免費(fèi)獲取一份架構(gòu)學(xué)習(xí)視頻和架構(gòu)學(xué)習(xí)體系進(jìn)階圖。<br>感謝大家對(duì)我的關(guān)注！
-
Android開發(fā)之ViewPager切換動(dòng)畫（只有你想不到，沒有做不到）好久不見，這段時(shí)間忙著做自己的產(chǎn)品，又有一段時(shí)間沒更博了，今天帶來ViewPager的切換動(dòng)畫，先來看下效果圖： 這篇文章打算從3點(diǎn)切入：1、關(guān)于clipChildren屬性...
-
史上最全Android build.gradle配置詳解一、Project的build.gradle文件： 對(duì)應(yīng)的build.gradle代碼如下： buildscript{}閉包里是gradle腳本執(zhí)行所需依賴，分別是對(duì)應(yīng)的ma...
-
Android全面的項(xiàng)目工具類，我替你總結(jié)了在平時(shí)的項(xiàng)目開發(fā)中，總有那么一個(gè)包是必不可少的。我要說的就是utils包。沒了這個(gè)，代碼怎么公用，功能怎么公用，所謂磨刀不誤砍柴工，充分的準(zhǔn)備是快速開發(fā)的前提。utils包對(duì)...
-
Android Studio實(shí)用配置：讓你編碼更直觀快捷前言 在使用Android Studio開發(fā)中我們有很多常用的習(xí)慣可以通過設(shè)置快捷實(shí)現(xiàn)，下面我列舉一些使用設(shè)置。 1.自動(dòng)導(dǎo)包 File -->Setting-->Edito...
-
-
Android----仿qq頂部底部彈性ScrollView目錄 演示 思路 當(dāng)接觸到底部，頂部，滑動(dòng)時(shí)記錄滑動(dòng)距離，然后設(shè)置內(nèi)部孩子的layout,松開之后還原。 問題&核心代碼 問題1：如何記錄滑動(dòng)距離 答案：定義move，表示當(dāng)...
