連接es并創(chuàng)建Index 增刪改查 用es.search篩選數(shù)據(jù)的參數(shù) Reference:python-elasticsearch基本用法 - 做個(gè)筆記 - 博客園 (cn...
發(fā)簡信
IP屬地：上海
-
04_python使用elasticsearch
-
Linux常用命令
安裝程序./ sudo apt-get xxx 設(shè)置不同版本python的優(yōu)先級(jí)，比如我們同時(shí)擁有3.5和3.6，希望用python命令打開3.6而不是3.5，則用如下命令把...
-
Docker常用命令
查看本地所有鏡像： docker images 查看正在運(yùn)行容器： docker ps 查看所有容器： docker ps -a 在服務(wù)器上搜索鏡像abc(相當(dāng)于搜索引擎)：...
-
03_ES安裝和基本使用1. 安裝 以Windows版為例。 ElasticSearch官網(wǎng)下載：https://www.elastic.co/cn/elasticsearch/[https://w...
-
02_REST簡介1. 概述 REST全稱Representational State Transfer，是一種軟件的架構(gòu)風(fēng)格，而不是標(biāo)準(zhǔn)。只是提供了一組設(shè)計(jì)原則和約束條件，主要用于客戶端和服...
-
01_ElasticSearch簡介1. 概述 ES是一款基于Apache Lucene的開源的分布式查詢和分析引擎。可以通過其RestFul API輕松實(shí)現(xiàn)搜索功能，而不必去面對(duì)Lucene的復(fù)雜性。 被應(yīng)用...
-
1 Airflow簡介1. 定義 Airflow是一個(gè)可編程、調(diào)度和監(jiān)控的工作流平臺(tái)。 Airflow用戶可以定義一組有依賴關(guān)系的任務(wù)，即郵箱無環(huán)圖（DAG），按照依賴依次執(zhí)行。 Airflow提...
-
8.2 Impala
一、Hive缺陷 Hive建立在Hadoop平臺(tái)上，依賴底層的MapReduce和HDFS，因此延遲高 二、Impala簡介 Impala由Cloudera公司開發(fā)實(shí)時(shí)交互查...
-
8.1 數(shù)據(jù)倉庫Hive一、數(shù)據(jù)倉庫概述 1. 概念 數(shù)據(jù)倉庫是一個(gè)面向主題的、集成的、相對(duì)穩(wěn)定的、反映歷史變化的數(shù)據(jù)集合目的：支持商業(yè)分析和管理決策 2. 典型結(jié)構(gòu) 包括四個(gè)層次：數(shù)據(jù)源 -> 數(shù)...
-
新手向SXOS系統(tǒng)(11.0)升級(jí)教程 - 草稿ps:仔細(xì)看注1.2.3。黑屏或者出問題的朋友請(qǐng)仔細(xì)看教程回顧哪步做得有問題，造成黑屏的原因很多，你一句黑屏根本描述不清楚你的情況，我實(shí)在不知道怎么回復(fù)。超級(jí)小白一定要先備份...
-
-
4.7 在Python下使用HBase
一、前期工作 在Linux（我用的Ubuntu18.04）已經(jīng)安裝好Apache Hadoop2和Anaconda3，并已經(jīng)安裝了HBase（可參考4.6 HBase基本使用...
-
HBase無法停止時(shí)的做法
當(dāng)運(yùn)行./stop-hbase時(shí)，出現(xiàn)stopping hbase.........，有時(shí)真的是關(guān)閉慢，耐心等一會(huì)兒。但有時(shí)等了很久依舊點(diǎn)點(diǎn)點(diǎn)，則只能強(qiáng)行關(guān)閉。 強(qiáng)行關(guān)閉方法...
-
7.5 MapReduce簡單實(shí)例2：自然連接
一、任務(wù)描述 我們有兩個(gè)表，雇員表和部門表。雇員表： NameEmpldDeptNameHarry3415財(cái)務(wù)Sally2241銷售George3401財(cái)務(wù)Harriet22...
-
7.4 MapReduce簡單實(shí)例1：WordCount一、任務(wù)描述 目標(biāo)是詞頻統(tǒng)計(jì)，即統(tǒng)計(jì)輸入文本各單詞的出現(xiàn)的次數(shù)。 二、可行性分析 并不是所有問題都適合MapReduce來解決。MapReduce的處理策略是“分而治之”，即...
-
7.3 MapReduce工作流程一、基本步驟 (1) 首先從HDFS中讀取數(shù)據(jù)，并對(duì)它做分片操作（split）(2) 每個(gè)小分片單獨(dú)啟動(dòng)一個(gè)map任務(wù)來處理此分片的數(shù)據(jù)。map任務(wù)的輸入和輸出都是key-v...
-
7.2 MapReduce的體系結(jié)構(gòu)一、結(jié)構(gòu)概覽 MapReduce主要由四部分組成：Client、JobTracker、TaskScheduler和TaskTracker 二、客戶端Client 作用：(1)...
-
7.1 MapReduce概述一、概念 MapReduce是一種分布式并行編程框架——分布式并行編程：借助一個(gè)集群的多臺(tái)機(jī)器，同時(shí)并行處理大規(guī)模數(shù)據(jù)。 MapReduce最早由Google提出，Apach...
