擴(kuò)展閱讀： Apache Kylin 查詢流程源碼剖析 - 簡書[http://www.itdecent.cn/p/21df8303d2ae]...
投稿
收錄了20篇文章 · 4人關(guān)注
-
Apache Kylin 概覽 -
Spark JDBC系列--Mysql tinyInt字段特殊處理
本文旨在介紹 Spark 讀取tinyInt字段時，如何處理精度損失的情況 MySQLDialect spark中，mysql的方言主要約定了數(shù)...
-
Spark JDBC系列--讀取優(yōu)化
本文旨在介紹 Spark 通過JDBC讀取數(shù)據(jù)時常用的一些優(yōu)化手段 關(guān)于數(shù)據(jù)庫索引 無論使用哪種JDBC API，spark拉取數(shù)據(jù)最終都是以s...
-
Spark JDBC系列--源碼簡析
本文旨在簡析 Spark 讀取數(shù)據(jù)庫的一些關(guān)鍵源碼 Spark如何讀取數(shù)據(jù)庫數(shù)據(jù) 像其他的數(shù)據(jù)映射框架一樣（如hibernate，mybatis...
-
Spark JDBC系列--取數(shù)的四種方式本文旨在介紹 Spark 通過JDBC讀取數(shù)據(jù)庫數(shù)據(jù)的四種API 調(diào)用前準(zhǔn)備 對于不同的數(shù)據(jù)庫，需要在spark的環(huán)境中添加對應(yīng)的driver包...
-
Apache Spark 2.2.0 中文文檔 - Spark SQL, DataFrames and Datasets Guide | ApacheCN
Spark SQL, DataFrames and Datasets Guide Overview SQL Datasets and DataF...
-
[Spark源碼剖析]Spark 延遲調(diào)度策略
本文旨在說明 Spark 的延遲調(diào)度及其是如何工作的 什么是延遲調(diào)度 在 Spark 中，若 task 與其輸入數(shù)據(jù)在同一個 jvm 中，我們稱...
-
Spark的位置優(yōu)先: TaskSetManager 的有效 Locality Levelsbased on spark-1.5.1 standalone mode 在Spark Application Web UI的 Stages t...
-
[spark] Task執(zhí)行流程
前言 在文章TaskScheduler 任務(wù)提交與調(diào)度源碼解析 中介紹了Task在executor上的邏輯分配，調(diào)用TaskSchedulerI...
-
[spark] TaskScheduler 任務(wù)提交與調(diào)度源碼解析
在DAGScheduler劃分為Stage并以TaskSet的形式提交給TaskScheduler后，再由TaskScheduler通過Task...
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/557306/ff9bc6abd61ac48151578deb9a9f1ad8.jpg', '推薦專題《污力_spark》（ 分享自 @簡書 ）','http://www.itdecent.cn/c/54b78a43a208?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','頁面編碼gb2312|utf-8默認(rèn)gb2312'));){kind=link}