（筆記）超參數(shù)：在算法運行前需要決定的參數(shù)模型參數(shù)：算法過程中學習的參數(shù) 輸出結(jié)果：0.9888888888888889這是一個最簡單的算法，輸出的結(jié)果是預(yù)測的準確率（就是y...
發(fā)簡信
IP屬地：黑龍江
-
Hyper-Parameters
-
ADB—查看設(shè)備信息
ADB，即 Android Debug Bridge，它是 Android 開發(fā)/測試人員不可替代的強大工具，也是 Android 設(shè)備玩家的好玩具。 注： 有部分命令的支持...
-
Spark on k8s: 調(diào)試Driver Pod的方法相關(guān)文章 1 . Spark on k8s: 調(diào)試客戶端spark-submit進程 通過前一篇博客的學習，已經(jīng)學會了客戶端 spark-submit 這個進程的調(diào)試方式，由...
-
Spark on k8s: 配置和使用ConfigMap什么是 ConfigMap 顧名思義，用來存配置的Map，可以存單個配置或者配置文件，在 POD 中我們可以通過環(huán)境變量來訪問單個配置和配置文件，后者一般會被 mount 到...
-
Spark on k8s: 調(diào)試Executor Pod的方法相關(guān)文章 1 . Spark on k8s: 調(diào)試客戶端spark-submit進程 Spark on k8s: 調(diào)試Driver Pod的方法 前兩篇博客已經(jīng)將 Spark...
-
Spark on k8s: OkHttp WebSocket 非daemon線程導致Driver線程無法退出問題描述 基于Spark 3.0-SNAPSHOT(unreleased)，做Spark-Terasort相關(guān)測試，任務(wù)正常的話分如下圖所示兩個stage， 第一個，stag...
-
Spark on k8s: 通過hostPath設(shè)置SPARK_LOCAL_DIRS加速Shuffle前言 spark.local.dir/SPARK_LOCAL_DIRS 用于Spark 在 Shuffle階段臨時文件及RDD持久化存儲等，可以使用逗號分隔配置多個路徑對應(yīng)到...
-
Spark on k8s: failed to create container for [kubepods burstable...no space left on device問題描述 測試了若干天的Spark on k8s, 今天突然就無法初始化 Spark Driver Pod 了。表現(xiàn)如下， 客戶端側(cè)以cluster模式提交一個幾秒就會結(jié)束的...
