當使用sparkstreaming處理流式數(shù)據(jù)的時候，它的數(shù)據(jù)源搭檔大部分都是Kafka，尤其是在互聯(lián)網(wǎng)公司頗為常見。 當他們集成的時候我們需要重點考慮就是如果程序發(fā)生故障，...
發(fā)簡信
IP屬地：上海
-
關(guān)于SparkStreaming的checkpoint的弊端
-
hive sql數(shù)據(jù)分析面試整理
1.寫作目的說明 hive sql是從事數(shù)據(jù)分析的同學的基本功。無論是秋招、春招或者是實習，sql都是面試官考察的重點，拿剛剛過去的19秋招來說，搜狐、網(wǎng)易、京東等在數(shù)據(jù)分析...
-
Hbase問題匯總與解答
今天早上分享了下HBase，分享的時候同事提出了一些問題，可能大部分有有這樣的困惑，匯總下來： HBase問題匯總與解答 兩個獨立的服務(wù)器，一臺用HDFS，一臺不用HDFS可...
-
@Mr_Alfred 沒事，已經(jīng)解決了。。。
SparkSql 讀取文件/讀取hdfs文件
SparkSql 讀取文件/讀取hdfs文件 讀取本地： 讀取hdfs上的文件： 這兩個文件從hdfs配置文件中拿下來放在這里。
-
可以看一下 hdfs-site.xm跟core-site.xml這兩個配置文件的內(nèi)容嗎
SparkSql 讀取文件/讀取hdfs文件
SparkSql 讀取文件/讀取hdfs文件 讀取本地： 讀取hdfs上的文件： 這兩個文件從hdfs配置文件中拿下來放在這里。
-
學Git，為自己劉小澤寫于18.12.18-19了解到Git其實就是因為很紅的Github，但Git包含的東西比Github多多了。Git的魔力一直吸引著我，但目前還是只看到了Git的冰山一...
-
移動端H5防劫持（防止廣告注入）
移動端H5防劫持（防止廣告注入） 最近項目中自己的H5網(wǎng)頁出現(xiàn)了被劫持插入廣告的事件，看好趁著這個節(jié)點整理下H5被劫持的原因及防止劫持的方法。 原因： 經(jīng)過查找和調(diào)研市面上出...
-
nginx系列3——nginx反向代理、動靜分離、負載均衡nginx反向代理、動靜分離、負載均衡 反向代理 要說反向代理，我們就先要理解正向代理 ,下面我們就談?wù)務(wù)虼砗头聪虼戆伞?正向代理 一個位于客戶端和原始服務(wù)器(orig...
-
簡單粗暴使用git！使用 git 有三種方式，按照你的需求選擇1.只在本地使用2.將本地倉庫上傳到 GitHub3.下載 GitHub 上的倉庫 （提醒：使用前需先配置哦，參考 如何配置 Git...
-
Java架構(gòu)想進階的加QQ：2954948836免費獲取一份架構(gòu)學習視頻和架構(gòu)學習體系進階圖。<br>感謝大家對我的關(guān)注！
-
Android開發(fā)之ViewPager切換動畫（只有你想不到，沒有做不到）好久不見，這段時間忙著做自己的產(chǎn)品，又有一段時間沒更博了，今天帶來ViewPager的切換動畫，先來看下效果圖： 這篇文章打算從3點切入：1、關(guān)于clipChildren屬性...
-
史上最全Android build.gradle配置詳解一、Project的build.gradle文件： 對應(yīng)的build.gradle代碼如下： buildscript{}閉包里是gradle腳本執(zhí)行所需依賴，分別是對應(yīng)的ma...
-
Android全面的項目工具類，我替你總結(jié)了在平時的項目開發(fā)中，總有那么一個包是必不可少的。我要說的就是utils包。沒了這個，代碼怎么公用，功能怎么公用，所謂磨刀不誤砍柴工，充分的準備是快速開發(fā)的前提。utils包對...
-
Android Studio實用配置：讓你編碼更直觀快捷前言 在使用Android Studio開發(fā)中我們有很多常用的習慣可以通過設(shè)置快捷實現(xiàn)，下面我列舉一些使用設(shè)置。 1.自動導包 File -->Setting-->Edito...
-
-
Android----仿qq頂部底部彈性ScrollView目錄 演示 思路 當接觸到底部，頂部，滑動時記錄滑動距離，然后設(shè)置內(nèi)部孩子的layout,松開之后還原。 問題&核心代碼 問題1：如何記錄滑動距離 答案：定義move，表示當...
