clickhouse搭建使用

一、clickhouse介紹

????clickhouse 是俄羅斯的“百度”Yandex公司在2016年開源的,一款針對大數(shù)據(jù)實(shí)時分析的高性能分布式數(shù)據(jù)庫,與之對應(yīng)的有hadoop生態(tài)hive,Vertica和百度出品的palo。這是戰(zhàn)斗民族繼nginx后,有開源的一款“核武器”。據(jù)官方介紹,clickhouse 有以下優(yōu)點(diǎn):

1. 面向列式

2. 數(shù)據(jù)壓縮

3. 多核并行處理

4. 分布式部署

5. 支持sql

6. 向量引擎

7. 實(shí)時寫入

8. 異步復(fù)制

二、安裝與搭建

拉取repo源

curl -s https://packagecloud.io/install/repositories/altinity/clickhouse/script.rpm.sh | sudo bash

在root賬號下,使用yum安裝

yum list? 'clickhouse*'

yum –y install? 'clickhouse*'

安裝完成后,會在$PATH下等到clickhouse-server/ clickhouse-client等命令,可以使用次命令直接啟動clickhouse-server

啟動server

clickhouse-server --daemon --config-file=/etc/clickhouse-server/config.xml --pid-file=/var/run/clickhouse-server/clickhouse-server.pid

客戶端連接

clickhouse-client --host=... --port=... --user=... --password=...

默認(rèn):clickhouse-client即可

三、clickhouse設(shè)置

clickhouse的server配置,在/etc/clickhouse-server/config.xml及user.xml,前者是clickhouse的系統(tǒng)配置,包括日志,服務(wù)部署ip,zk等配置。后者是當(dāng)前節(jié)點(diǎn)服務(wù)的配置,包括用戶名密碼,內(nèi)存大小限制等

config.xml



四、安裝與運(yùn)行問題

問題:

Include not found: clickhouse_remote_servers

Include not found: clickhouse_compression

Poco::Exception. Code: 1000, e.code() = 0, e.displayText() = Exception: Cannot set max size of core file to 1073741824, e.what() = Exception

解決:

沒有開放core文件寫入,使用命令: ulimit -c 1073741824, 開放即可。


問題:

<Error> Application: DNS error: EAI: -9

解決:

本機(jī)沒有開放ipv6,只能對ipv4生效??梢钥紤]在config.xml中,把<listen_host>::</listen_host> 改成<listen_host>0.0.0.0</listen_host>


問題:

:Memory limit (for query) exceeded: would use 9.31 GiB (attempt to allocate chunk of 1048576 bytes), maximum: 9.31 GiB

解決:

修改user.xml里max_memory_usage 值,把他改大一些,默認(rèn)是953M,不到1G,可以改到2G

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容