1，CDH的搭建可以參考 https://blog.csdn.net/q1370992706/article/details/79578444 2，在CDH安裝spark 沒...
發(fā)簡信
IP屬地：上海
-
CDH-Spark/2環(huán)境搭建（pyspark測試）
-
HELM噸位監(jiān)視器概述
噸位監(jiān)視器概述 機器保護和零件質量控制 Helm噸位監(jiān)視器采用業(yè)內最先進的信號調節(jié)技術。所有噸位監(jiān)控系統(tǒng)都具有內置的機器保護報警和自動上下限，用于在線零件質量監(jiān)控和控制。從各...
-
pySpark 從0搭建（ubuntu16.04）
1，下載 spark-2.3.0-bin-hadoop2.7 hadoop-2.8.1/ 2，配置 export JAVA_HOME=/usr/jdk1.8.0_171exp...
-
hadoop-docker環(huán)境從零搭
《1，虛擬機ubuntu16.04》 設置root用戶初始密碼sudo passwd 《2，ssh》 apt-get updateapt-get install openss...
-
pySpark API 詞頻統(tǒng)計(5)
#1 本地計算 pyhont xx.py #2 提交集群 spark-submit --py-files pyspark_wordcount.zip pyspark_word...
-
pySpark API 實操 lambda(4)
lambda在pyspark中的使用 lambda的一般形式是關鍵字lambda后面跟一個或多個參數(shù)，緊跟一個冒號，以后是一個表達式。lambda是一個表達式而不是一個語句。...
-
pySpark API實操(3)
#if run in windows use thisimport findsparkfindspark.init() # importfrom pyspark import...
-
pySpark 中文API (2)
pyspark.sql模塊 模塊上下文 Spark SQL和DataFrames的重要類： pyspark.sql.SparkSession主要入口點DataFrame和SQ...
-
pySpark 中文API (1)
http://spark.apache.org/docs/latest/api/python/index.html pyspark軟件包 子包 pyspark.sql模塊 p...
-
windows單機spark下開發(fā)基于pyspark
''' 在寫交互腳本時，首先導入findspark包，然后執(zhí)行findspark.init()，這兩行寫在前邊 ''' import findsparkfindspark.i...
-
hadoop-spark
1.下載spark:spark-2.0.0-bin-hadoop2.7.tgz 2.解壓至D:\bigdata\spark-2.0.0-bin-hadoop2.7 3.配置環(huán)...
-
Gopher-Lua API 趟坑（一）PS：gopher-lua 調用全局和成員函數(shù)的區(qū)分 GetGlobal 和 GetField 應用方法 1，lua腳本 2，go 調用 lua函數(shù)在全局和成員函數(shù)上的區(qū)分 ...
-
OpenCV的全稱是：Open Source Computer Vision Library。OpenCV是一個基于BSD許可（開源）發(fā)行的跨平臺計算機視覺庫，可以運行在Linux、Windows、Android和Mac OS操作系統(tǒng)上。它輕量級而且高效——由一系列 C 函數(shù)和少量 C++ 類構成，同時提供了Python、Ruby、MATLAB等語言的接口，實現(xiàn)了圖像處理和計算機視覺方面的很多通用算法。
-
@IT人故事會 ??
實時量化選股-tushare利用
量化選股的常用python模塊，介紹tushare使用中，總結的一些短代碼 import tushare as ts symbols = ts.get_stock_basic...
-
實時量化選股-tushare利用
量化選股的常用python模塊，介紹tushare使用中，總結的一些短代碼 import tushare as ts symbols = ts.get_stock_basic...
-
交易策略和狀態(tài)機轉（二）
這篇講一講雙合約套利的狀態(tài)機。套利涉及兩個合約，也就是雙腿開平的問題。相對于單合約的話，狀態(tài)機就麻煩很多。 不過就像前文所說，我們對訂單施加動作，將委托回報或成交回報歸納為若...
-
交易策略和狀態(tài)機轉（三）
前面兩篇文章所描述的狀態(tài)機，思維的基礎是：對一個訂單施加動作，將委托回報或成交回報歸納為若干對此訂單施加動作后的回饋，在等待動作回饋時設置此訂單狀態(tài)。因此，我們跟蹤狀態(tài)的對象...
-
交易策略和狀態(tài)機轉（一）
最近太忙，很久沒有寫文章了，早就想說說策略和狀態(tài)機。 很多朋友有很好的交易策略，但是在用程序化加以實現(xiàn)的時候，往往發(fā)現(xiàn)程序控制不能按照事先的思路執(zhí)行，會遇到多開了倉，多平了倉...
