DataHub命令操作

準(zhǔn)備工作

  1. 下載命令行工具進行datahub_console.tar.gz并解壓

  2. 在conf目錄中的datahub.properties文件填寫ak endpoint信息

    參數(shù)說明:

    • datahub.accessid: 訪問DataHub的accessId

    • datahub.accesskey: 訪問DataHub的accessKey信息

    • datahub.endpoint: 域名,具體可查看域名列表

  3. 在bin目錄執(zhí)行啟動腳本

    • Linux環(huán)境:sh start.sh

    • Windows環(huán)境:直接運行start.cmd文件

工具包解壓在英文路徑下最好

  1. 導(dǎo)出命令舉例
    down -p project名稱 -t topic名稱 -s shardId -d subId -f E:\test.txt -ti "2021-05-24 00:00:00" -l 1000 -g 1

下載數(shù)據(jù)
-f: 參數(shù)表示文件路徑,注意:windows路徑下請?zhí)砑愚D(zhuǎn)義符,例如:D:\test\test.txt
-p: project名稱
-t: topic名稱
-s: shardId
-d: 訂閱id
-f: 下載路徑
-ti: 參數(shù)表示讀取該時間之后的點位,格式為:yyyy-mm-dd hh:mm:ss
-l: 參數(shù)表示每次讀取的數(shù)量
-g: 參數(shù)表示是否一直讀
0表示只讀一次,即獲取當(dāng)前recordsize后不再消費
1表示一直讀取

官方文檔更加詳細

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 一、業(yè)務(wù)一:查出所有產(chǎn)品列表的三級分類并返回一個數(shù)據(jù)樹形結(jié)構(gòu) 對應(yīng)著數(shù)據(jù)庫中的表:pms_category 二、配...
    西谷haul閱讀 1,043評論 0 0
  • 網(wǎng)校配置 后臺配置 延展閱讀 創(chuàng)建Bucket 設(shè)置參數(shù) 跨域設(shè)置 RAM訪問用戶設(shè)置 新建用戶 添加權(quán)限策略 新...
    少宇ShoYu閱讀 556評論 0 0
  • 筆主很早就開始用阿里云OSS 存儲服務(wù)當(dāng)做自己的圖床了。如果沒有用過阿里云OSS 存儲服務(wù)或者不是很了解這個東西的...
    奧莉安娜的棒棒糖閱讀 1,688評論 0 0
  • 企業(yè)上云首當(dāng)其沖的就是要考量安全性的問題。為了保證系統(tǒng)的安全,和數(shù)據(jù)的安全,公司必須制定訪問控制策略。首先看看現(xiàn)在...
    MlLance閱讀 2,208評論 1 1
  • 1.安裝阿里云cli工具,官網(wǎng)有兩種安裝方式直接使用安裝包或者編譯安裝,推薦直接使用包下載地址 https://g...
    OPS_Joy閱讀 848評論 0 0

友情鏈接更多精彩內(nèi)容