Ambari Blueprints 學(xué)習(xí)筆記

思維導(dǎo)圖

Ambari Blueprints.png

是什么

Ambari Blueprints 是用來自動(dòng)化安裝hdp組件的配置文件,它告訴ambari:要安裝什么service/component,安裝在哪里。

它通過REST API與ambari交互,上傳和更新配置。

前提

Ambari server/agent已經(jīng)安裝完成

步驟

  1. Step 1: 手工寫或者下載現(xiàn)有hdp系統(tǒng)的blueprint文件。

    下載方法:

    GET /api/v1/clusters/:clusterName?format=blueprint

    e.g.

    $ curl  -H "X-Requested-By: ambari" --user admin:admin \
    > -X GET http://localhost:8080/api/v1/clusters/RoyCLUSTER?format=blueprint > mybl.json
    

可以先手工安裝HDP,再用上面的辦法把blueprint 下載下來,如此就獲取了一個(gè)真實(shí)的配置文件,可以在這個(gè)文件的基礎(chǔ)上做修改。

下面就是這個(gè)配置文件的簡化版,介紹它的框架結(jié)構(gòu)。

Blueprint Structure
{
  "configurations" : [
        ### 定義hdp里面各個(gè)組件的配置,也可以不寫,使用默認(rèn)配置。
  ],
  "host_groups" : [
     {
       "configurations" : [ ],
       "components" : [
          { "name": "NODEMANAGER" },
          { "name": "DATANODE" },
          { "name" : "METRICS_MONITOR" }
        ],
       "name" : "slavenode",
       "cardinality" : "5"
     },
      {
       ###   定義哪個(gè)host group 安裝什么component。
      }  ...
  ],
  "settings" : [
    ### 其它設(shè)置,比如component自啟動(dòng)。可以不寫。
  ],
  "Blueprints" : {
    "stack_name" : "HDP",
    "stack_version" : "2.6"
      ### Blueprint and stack information
  }
}
  1. Step 2: Register Blueprint with Ambari

    POST /api/v1/blueprints/:blueprintName

    e.g.

    $ curl  -H "X-Requested-By: ambari" --user admin:admin \ 
    > -X POST http://localhost:8080/api/v1/blueprints/cluster_blueprint \
    > -d@mybl.json
    

    這個(gè)blueprint文件就是上一步生成的mybl.json

  2. Step 3: Create Cluster Template

    把 host 和 blueprint file 中的 host_group 對應(yīng)起來。

    File: hostmapping-3.json

    {
      "blueprint" : "cluster_blueprint",
      "repository_version_id": 1,  # local repo 需要,否則刪除。
      "default_password" : "admin",
      "configurations" : [
      ],
      "host_groups" :[
        {
          "name" : "host_group_1",
          "hosts" : [
            {
              "fqdn" : "roy-vm-hdp-1"
            }
          ]
        },
        {
          "name" : "host_group_2",
          "hosts" : [
            {
              "fqdn" : "roy-vm-hdp-2"
            }
          ]
        },
            {
          "name" : "host_group_3",
          "hosts" : [
            {
              "fqdn" : "roy-vm-hdp-3"
            }
          ]
        }
      ]
    }
    
  3. Step 4: Create Cluster (讓ambari安裝hdp組件)

    POST /api/v1/clusters/:clusterName

    e.g.

    $ curl -H "X-Requested-By: ambari" -X POST -u admin:admin  \ 
    > http://localhost:8080/api/v1/clusters/roycluster -d@/tmp/hostmapping-3.json
    

    hostmap告訴它用哪一個(gè)blueprint。

  4. Step 5: Monitor Cluster Creation Progress

    GET /api/v1/clusters/:clusterName/requests/1

    e.g.

    $ curl  -H "X-Requested-By: ambari" --user admin:admin \ 
    > -X GET  http://localhost:8080/api/v1/clusters/EEACLUSTER/requsts/1 | more
      % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                     Dload  Upload   Total   Spent    Left  Speed
    100 19305  100 19305    0     0   417k      0 --:--:-- --:--:-- --:--:--  418k
    {
      "href" : "http://localhost:8080/api/v1/clusters/EEACLUSTER/requests/1";,
      "Requests" : {
        "aborted_task_count" : 0,
        "cluster_name" : "EEACLUSTER",
        "completed_task_count" : 75,
        "create_time" : 1518333235226,
        "end_time" : -1,
        "exclusive" : false,
        "failed_task_count" : 0,
        "id" : 1,
        "inputs" : null,
        "operation_level" : null,
        "progress_percent" : 100.0,
        "queued_task_count" : 0,
        "request_context" : "Logical Request: Provision Cluster 'EEACLUSTER'",
        "request_schedule" : null,
        "request_status" : "COMPLETED",
        "resource_filters" : null,
        "start_time" : -1,
        "task_count" : 75,
        "timed_out_task_count" : 0,
        "type" : null
      },
      ...
    

參考文檔:

https://cwiki.apache.org/confluence/display/AMBARI/Blueprints

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

  • 不定期更新 收錄各種奇葩問題 ambari安裝之后,啟動(dòng)hive MetaStore時(shí)報(bào)錯(cuò) Solution:hi...
    Pleb_King閱讀 3,580評論 0 2
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理,服務(wù)發(fā)現(xiàn),斷路器,智...
    卡卡羅2017閱讀 136,569評論 19 139
  • Removing a Service (2.1.0) Verified against releases 2.1....
    杰杰微電閱讀 1,762評論 0 1
  • “死亡不是永久的告別,忘記才是”,這是《尋夢環(huán)游記》這部動(dòng)畫片的一句電影臺詞,讓我想起了很多往事。 這部動(dòng)畫片基本...
    王世鵬閱讀 487評論 0 0
  • 在看到本文之前,如果讀者沒看過筆者的前文 獲取Android源碼,初識源碼模塊架構(gòu),請先翻閱。 JNI: Java...
    Louis_陸閱讀 852評論 0 2

友情鏈接更多精彩內(nèi)容