發(fā)簡信
IP屬地：廣東
-
spark跟pandas數(shù)據(jù)轉(zhuǎn)換
因?yàn)閭鹘y(tǒng)的機(jī)器學(xué)習(xí)是基于sklearn,xgboost,有著豐富分算法庫,spark mlib不能滿足所有的需求. spark來處理數(shù)據(jù)預(yù)處理...
-
pycharm 開發(fā)pyspark下載spark包 配置參數(shù) 配置spark參數(shù)vim ${spark_dir}/conf/spark-env.shexport SPARK_LO...
-
scala特性
為了能用scala開發(fā)spark,簡單的介紹一下scala特性.scala即面向?qū)ο缶幊?也同時(shí)面向方法編程,也可以說是面向容器編程,在編譯階段...
-
spark應(yīng)用開發(fā)HelloWorld準(zhǔn)備 代碼列子1.安裝scala插件開發(fā)工具 intellij-IDEA 插件 3.開發(fā)代碼數(shù)據(jù)people.json 新建HelloWorld...
-
marathon 訂閱事件
參考:https://mesosphere.github.io/marathon/docs/event-bus.html 啟用marathon訂...
-
安裝docker
安裝docker yum install docker 啟動(dòng)docker sudo service docker start
-
Jupyter gateway api使用啟動(dòng) nohup jupyter kernelgateway --JupyterWebsocketPersonality.list_kernel...
-
Jupyter Kernel Gateway 安裝
安裝 conda install -c conda-forge jupyter_kernel_gateway 啟動(dòng) jupyter kernel...
-
安裝Anaconda
下載 https://www.continuum.io/downloads 安裝 bash $filedir/anaconda_xxx.sh 參...