Centos 編譯安裝 Kafka

1

有所為,有所不為。
但是,具體做哪些,為什么做?需要心里有個明確的目標。

2

有天,在一朋友的朋友圈里討論了 docker 如何管理自己的鏡像?
大體有以下幾個方法:

  • 本地管理;(此朋友 images & container 均找不到了)
  • Dockerfile;
  • 三方 images & 三方托管;
  • docker compose;

此文不比哪種方式更好,列出各種方式的原因是想說明每個人在能往同一個結果的途徑是一樣的,本人也鼓勵不一樣,但是我希望大家明白自己選擇途徑的理由是充分的,而不是人云亦云。

阿里云服務優(yōu)惠碼
阿里云雙11服務器大減價
參加我的團更享活動價上再享5折優(yōu)惠,預購從速!

3

對于各自開發(fā)環(huán)境的選擇,開發(fā)測試中,本人都愿意自己編譯、安裝與配置。但是生產環(huán)境會傾向于官方發(fā)布的 release 版本。對于 Kafka 的深入學習過程,本人依舊是選擇自行編譯安裝,盡管 Kafka 的編譯過程無需太多人為處理。

4

以下是本人對 Kafka 編譯安裝過程的一點記錄:

  1. 下載源碼

wget http://mirrors.hust.edu.cn/apache/kafka/1.1.0/kafka-1.1.0-src.tgz

  1. 編譯
    Kafka 核心是基于 scala 編寫的,并運行于 JVM 中。Kafka 的編譯也很簡單,因為其是基于 gradle 管理的。編譯 Kafka 之前未有接觸,查了一下發(fā)現只需要簡單的 gradle 就可以執(zhí)行了。
# 解壓源文件
tar xvf kafka-1.1.0-src.tgz
# 進入源碼目錄并開始編譯
cd kafka-1.1.0-src
gradle

滿心歡喜,事實上,如果你以前沒有使用過 gradle 命令,會提示如下:

bash: gradle: command not found

現在,你不得不轉去先安裝 gradle

wget https://downloads.gradle.org/distributions/gradle-4.8.1-all.zip
mkdir /opt/gradle
unzip -d /opt/gradle/ gradle-4.8.1-all.zip
# 配置環(huán)境
vim  /etc/profile
export GRADLE_HOME=/opt/gradle/gradle-4.5.1
export PATH=$PATH:GRADLE_HOME/bin
source /etc/profile

安裝完 gradle 后,執(zhí)行 gradle。遺憾的時,如果你之前沒有裝 java 環(huán)境,你還需要去安裝 java 環(huán)境。

# 編譯
gradle
# 執(zhí)行完后,會生成 gradlew 文件,打包
./gradlew --info releaseTarGzAll -x signArchives

編譯打包后,會在 core/build/distributions/ 文件夾中生成 kafka_2.11-1.1.0.tgz 文件,此文件與 github 或者官方網站上下載的文件一致。如果你在編譯中遇到了問題請繼續(xù)往下看。

5

  • 有說要手動安裝 scala 的,但實際上 gradle 會下載依賴文件。所以如果沒有意外,不需要手動安裝配置 scala
  • 如果進程失敗退出并提示:

Process 'Gradle Worker Daemon 1' finished with non-zero exit value 137

這是因為執(zhí)行過程中進程 gradle 進程未能退出:

ps aux | grep "gralde"
# 找到后并終止進程
kill xxxx

6

編譯、運行 kafka-manager

wget https://github.com/yahoo/kafka-manager/archive/1.3.3.18.tar.gz
tar zxvf kafka-manager-1.3.3.18.tar.gz
cd kafka-manager-1.3.3.18/
./sbt clean dist

整個過程會很慢,幾乎沒有坑,只是下載過程會很慢。

# 修改配置后運行
./bin/kafka-manager ./conf/application.conf

到此,Kafka 的編譯已經完成,安裝就不再詳述。

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
【社區(qū)內容提示】社區(qū)部分內容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內容

  • Spring Cloud為開發(fā)人員提供了快速構建分布式系統(tǒng)中一些常見模式的工具(例如配置管理,服務發(fā)現,斷路器,智...
    卡卡羅2017閱讀 136,534評論 19 139
  • “你有大女兒嗎?”旁邊正在削芒果皮的女兒問?!斑@是昵稱好不好,聽上去親切”。今天是大年初四,現在是晚上19...
    ferrywly閱讀 312評論 2 2
  • 你說要種一棵樹 用童真去灌溉 用無邪去施肥 枯萎的枝葉也發(fā)芽 明天會收獲 很多 很多快樂的花 我說陪你種一棵樹 用...
    楓子夜閱讀 367評論 2 5
  • 裝滿人的鐵皮盒子沒有看見我,拖著紅色的尾燈跑遠了。一陣風吹過來,把黃的綠的燈混了顏色??諘绲鸟R路上,我和我的四個影...
    6986288f0d8f閱讀 260評論 0 1
  • 今晚先更七月和八月的吧
    柚子多多閱讀 1,534評論 0 4

友情鏈接更多精彩內容