SKIL/配置/Spark解釋器

Spark解釋器

可以配置筆記本和Zeppelin Spark 解釋器,以使用Spark來(lái)獲得更多的處理能力。如果本地Spark實(shí)例的計(jì)算能力不足,這將非常有用。你可以通過(guò)右上角的用戶名下拉菜單訪問(wèn)解釋器設(shè)置,如下圖所示。

image.gif
?

訪問(wèn)解釋器

搜索Spark解釋器并單擊“編輯”按鈕

image.gif
?

編輯Spark解釋器設(shè)置

你可以按“+”按鈕添加額外的鍵/值對(duì)。你可以在這里找到其他可配置的spark屬性。

image.gif
?

添加額外的鍵/值對(duì)

示例
大多數(shù)DL4J、DataVec和ND4j庫(kù)都位于SKIL_HOME/lib和 SKIL_HOME/native文件夾中(其中SKIL_HOME通常為/opt/skil)。要在Spark中以導(dǎo)出模式運(yùn)行分布式訓(xùn)練,需要以下Spark解釋器配置:

image.gif
?

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

友情鏈接更多精彩內(nèi)容