Sqoop是一種用于在Hadoop和關(guān)系數(shù)據(jù)庫或大型機(jī)之間傳輸數(shù)據(jù)的工具。您可以使用Sqoop從關(guān)系數(shù)據(jù)庫管理系統(tǒng)(RDBMS)(如MySQL、Oracle或大型機(jī))導(dǎo)入數(shù)據(jù)...
IP屬地：四川
-
【sqoop-部署】快速入門（安裝與使用） -
B站可搜(UP用戶名)：計(jì)算機(jī)畢業(yè)設(shè)計(jì)大學(xué)
-
HBase 與 Hive 的對(duì)比
1．Hive (1) 數(shù)據(jù)倉庫Hive 的本質(zhì)其實(shí)就相當(dāng)于將 HDFS 中已經(jīng)存儲(chǔ)的文件在 Mysql 中做了一個(gè)雙射關(guān)系，以方便使用 HQL 去管理查詢。(2) 用于數(shù)據(jù)分...
-
大數(shù)據(jù)技術(shù)之HBase1.1 什么是HBase ①HBase 是個(gè)的分布式存儲(chǔ)系統(tǒng)，利用HBASE 技術(shù)可在廉價(jià) PC Server 上搭建起大規(guī)模結(jié)構(gòu)化存儲(chǔ)集群②HBase 的目標(biāo)是存儲(chǔ)并處理大...
-
HBase安裝
2.1 Zookeeper 正常部署首先保證 Zookeeper 集群的正常部署，并啟動(dòng)之：[user@hadoop102 zookeeper-3.4.10]$ bin/zk...
-
-
-
【clickhouse-學(xué)習(xí)】01- ClickHouse初識(shí)及安裝使用官方文檔：https://clickhouse.yandex ClickHouse是什么？有什么？能做什么？ 為什么用？ 如何使用？ 尋找一堆黑人問號(hào)的答案 一、ClickH...
-
也可以用ip a命令??
Linux命令
①切換 root 用戶：su - root ②修改主機(jī)名： sudo vim /etc/hostname 映射：sudo vi /etc/hosts ③查看主機(jī)名：ho...
-
-
【重點(diǎn)】Hbase基本命令
一：Hbase 創(chuàng)建數(shù)據(jù)庫表 1.進(jìn)入hbase shell2.創(chuàng)建數(shù)據(jù)庫表的命令：create '表名', '列族名1','列族名2','列族名N'3.如果想查看所有數(shù)據(jù)庫...
-
不忘初心，砥礪前行<br>好記性不如爛筆頭...<br><br> --菜牛（liangriyu）
-
HBase原理及調(diào)優(yōu)-讀寫1.Region定位 Region按大小分割，每個(gè)表以開始只有一個(gè)region，隨著數(shù)據(jù)不斷地插入表，region不斷增大，當(dāng)增大到一定閾值時(shí)，HBase會(huì)根據(jù)一定規(guī)則將表進(jìn)...
-
hbase 集群管理--數(shù)據(jù)管理1.增加RegionServer節(jié)點(diǎn) ①修改conf目錄下的regionservers文件，添加新節(jié)點(diǎn)的主機(jī)名；②復(fù)制該文件到集群中的所有機(jī)器；③啟動(dòng)該機(jī)器： 1.mas...
-
HDFS參數(shù)調(diào)優(yōu)1.虛擬 CPU 個(gè)數(shù)計(jì)算方法 CPU 個(gè)數(shù) * 單個(gè) CPU 核數(shù) * 單個(gè) CPU 核的超線程數(shù) 為了避免資源浪費(fèi), 虛擬 CPU 與內(nèi)存需滿足線性比例: 1 : 4 G...
-
Hadoop 集群管理-HDFS1. Hadoop 數(shù)據(jù)管理 Hadoop 的數(shù)據(jù)管理，主要包括 Hadoop 的分布式文件系統(tǒng) HDFS、分布式數(shù)據(jù)庫 HBase 和數(shù)據(jù)倉庫工具 Hive。 （1）HDF...
-
Hadoop 集群---系統(tǒng)層面調(diào)優(yōu)
（1）避免使用 swap 分區(qū) swap 分區(qū)指的系統(tǒng)的物理內(nèi)存不夠用的時(shí)候,把物理內(nèi)存中的一部分空間釋放 出來,以供當(dāng)前運(yùn)行的程序使用。 通過 vm.swappiness ...
-
Hadoop測試使用
通過一個(gè) MapReduce 程序測試 Hadoop，統(tǒng)計(jì) HDFS 中/input/data.txt 文件內(nèi)單詞出現(xiàn) 的次數(shù)。 （1）在 Ubuntu 操作系統(tǒng)的~目錄下，...
-
Hadoop的配置文件
*注：這些配置文件的路徑均在 ${HADOOP_HOME}/ etc/hadoop 目錄下 （1）hadoop-env.sh #添加export JAVA_HOME=/hom...
-
Hadoop的偽分布模式安裝三種安裝模式簡介 （1）關(guān)閉防火墻 查看防火墻狀態(tài)：sudo ufw status 關(guān)閉防火墻：sudo ufw disable (2) SSH安裝 客...
