發(fā)簡(jiǎn)信
IP屬地：寧夏
-
hive建表-指定文件類型和壓縮類型以及字段分隔符
ORC文件--包含snappy、zlib兩種壓縮格式，不需要配置compress參數(shù) CREATE EXTERNAL TABLE tbl_orc...
-
關(guān)于是否在intellij idea 的工程下的resources目錄下添加core-site.xml 的區(qū)別？
hadoop core-site.xml 中通常有核心的配置項(xiàng)，比如： 如圖，當(dāng)resources目錄下添加了Hadoop core-site....
-
Kafka 入門1：系統(tǒng)架構(gòu)、基本概念以及偽集群搭建方法一、Kafka 是什么？ Apache Kafka 本質(zhì)上是一種消息中間件，用來(lái)可靠傳遞消息事件，用來(lái)管理消息隊(duì)列（Message Queue）...
-
Redis 高級(jí)功能
一、Redis 管道技術(shù) 1.1 背景 想象一下，現(xiàn)在需要向 Redis 中添加大量的 KV 對(duì)，可以通過(guò)直接調(diào)用大量的 set 命令來(lái)完成，比...
-
解決 hive 建表注釋中文亂碼問(wèn)題
有時(shí)在 hive 中創(chuàng)建表之后，在查看表結(jié)構(gòu)（describe TABLE_NAME）或者建表語(yǔ)句（show create table TABL...
-
Spark 中 RDD 算子 ReduceByKey 和 GroupByKey 使用方法和區(qū)別在對(duì)RDDPair（一種特殊的 RDD，即RDD[(key, Row)]）進(jìn)行操作時(shí)經(jīng)常會(huì)用到 reduceByKey() 和 groupByK...
-
HDFS讀寫(xiě)文件流程https://www.cnblogs.com/laowangc/p/8949850.html 一、HDFS讀取文件流程： 詳解讀取流程： Cl...
-
Flink 入門（一）：Flink 背景、架構(gòu)以及基本知識(shí)點(diǎn)今年 Flink 火的一塌糊涂，一些大廠比如阿里巴巴也都開(kāi)始使用 Flink 構(gòu)建實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)。 一、什么是 Flink ？ 1.1 批處理和流...
-
Flink 入門（二）：Mac 上搭建 Flink & Flink 配置項(xiàng)Flink V1.9 官方中文文檔地址：https://ci.apache.org/projects/flink/flink-docs-rele...