Ambari Blueprints 學(xué)習(xí)筆記

思維導(dǎo)圖

Ambari Blueprints.png

是什么

Ambari Blueprints 是用來(lái)自動(dòng)化安裝hdp組件的配置文件侧馅,它告訴ambari:要安裝什么service/component爸吮,安裝在哪里剥险。

它通過(guò)REST API與ambari交互纺涤,上傳和更新配置五垮。

前提

Ambari server/agent已經(jīng)安裝完成

步驟

  1. Step 1: 手工寫(xiě)或者下載現(xiàn)有hdp系統(tǒng)的blueprint文件睬棚。

    下載方法:

    GET /api/v1/clusters/:clusterName?format=blueprint

    e.g.

    $ curl  -H "X-Requested-By: ambari" --user admin:admin \
    > -X GET http://localhost:8080/api/v1/clusters/RoyCLUSTER?format=blueprint > mybl.json
    

可以先手工安裝HDP第煮,再用上面的辦法把blueprint 下載下來(lái),如此就獲取了一個(gè)真實(shí)的配置文件抑党,可以在這個(gè)文件的基礎(chǔ)上做修改包警。

下面就是這個(gè)配置文件的簡(jiǎn)化版,介紹它的框架結(jié)構(gòu)底靠。

Blueprint Structure
{
  "configurations" : [
        ### 定義hdp里面各個(gè)組件的配置害晦,也可以不寫(xiě),使用默認(rèn)配置暑中。
  ],
  "host_groups" : [
     {
       "configurations" : [ ],
       "components" : [
          { "name": "NODEMANAGER" },
          { "name": "DATANODE" },
          { "name" : "METRICS_MONITOR" }
        ],
       "name" : "slavenode",
       "cardinality" : "5"
     },
      {
       ###   定義哪個(gè)host group 安裝什么component壹瘟。
      }  ...
  ],
  "settings" : [
    ### 其它設(shè)置,比如component自啟動(dòng)鳄逾〉竟欤可以不寫(xiě)。
  ],
  "Blueprints" : {
    "stack_name" : "HDP",
    "stack_version" : "2.6"
      ### Blueprint and stack information
  }
}
  1. Step 2: Register Blueprint with Ambari

    POST /api/v1/blueprints/:blueprintName

    e.g.

    $ curl  -H "X-Requested-By: ambari" --user admin:admin \ 
    > -X POST http://localhost:8080/api/v1/blueprints/cluster_blueprint \
    > -d@mybl.json
    

    這個(gè)blueprint文件就是上一步生成的mybl.json

  2. Step 3: Create Cluster Template

    把 host 和 blueprint file 中的 host_group 對(duì)應(yīng)起來(lái)雕凹。

    File: hostmapping-3.json

    {
      "blueprint" : "cluster_blueprint",
      "repository_version_id": 1,  # local repo 需要殴俱,否則刪除政冻。
      "default_password" : "admin",
      "configurations" : [
      ],
      "host_groups" :[
        {
          "name" : "host_group_1",
          "hosts" : [
            {
              "fqdn" : "roy-vm-hdp-1"
            }
          ]
        },
        {
          "name" : "host_group_2",
          "hosts" : [
            {
              "fqdn" : "roy-vm-hdp-2"
            }
          ]
        },
            {
          "name" : "host_group_3",
          "hosts" : [
            {
              "fqdn" : "roy-vm-hdp-3"
            }
          ]
        }
      ]
    }
    
  3. Step 4: Create Cluster (讓ambari安裝hdp組件)

    POST /api/v1/clusters/:clusterName

    e.g.

    $ curl -H "X-Requested-By: ambari" -X POST -u admin:admin  \ 
    > http://localhost:8080/api/v1/clusters/roycluster -d@/tmp/hostmapping-3.json
    

    hostmap告訴它用哪一個(gè)blueprint。

  4. Step 5: Monitor Cluster Creation Progress

    GET /api/v1/clusters/:clusterName/requests/1

    e.g.

    $ curl  -H "X-Requested-By: ambari" --user admin:admin \ 
    > -X GET  http://localhost:8080/api/v1/clusters/EEACLUSTER/requsts/1 | more
      % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                     Dload  Upload   Total   Spent    Left  Speed
    100 19305  100 19305    0     0   417k      0 --:--:-- --:--:-- --:--:--  418k
    {
      "href" : "http://localhost:8080/api/v1/clusters/EEACLUSTER/requests/1";,
      "Requests" : {
        "aborted_task_count" : 0,
        "cluster_name" : "EEACLUSTER",
        "completed_task_count" : 75,
        "create_time" : 1518333235226,
        "end_time" : -1,
        "exclusive" : false,
        "failed_task_count" : 0,
        "id" : 1,
        "inputs" : null,
        "operation_level" : null,
        "progress_percent" : 100.0,
        "queued_task_count" : 0,
        "request_context" : "Logical Request: Provision Cluster 'EEACLUSTER'",
        "request_schedule" : null,
        "request_status" : "COMPLETED",
        "resource_filters" : null,
        "start_time" : -1,
        "task_count" : 75,
        "timed_out_task_count" : 0,
        "type" : null
      },
      ...
    

參考文檔:

https://cwiki.apache.org/confluence/display/AMBARI/Blueprints

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末粱挡,一起剝皮案震驚了整個(gè)濱河市赠幕,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌询筏,老刑警劉巖榕堰,帶你破解...
    沈念sama閱讀 212,816評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異嫌套,居然都是意外死亡逆屡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,729評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門(mén)踱讨,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)魏蔗,“玉大人,你說(shuō)我怎么就攤上這事痹筛≥褐危” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 158,300評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵帚稠,是天一觀的道長(zhǎng)谣旁。 經(jīng)常有香客問(wèn)我,道長(zhǎng)滋早,這世上最難降的妖魔是什么榄审? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 56,780評(píng)論 1 285
  • 正文 為了忘掉前任,我火速辦了婚禮杆麸,結(jié)果婚禮上搁进,老公的妹妹穿的比我還像新娘。我一直安慰自己昔头,他們只是感情好饼问,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,890評(píng)論 6 385
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著揭斧,像睡著了一般匆瓜。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上未蝌,一...
    開(kāi)封第一講書(shū)人閱讀 50,084評(píng)論 1 291
  • 那天,我揣著相機(jī)與錄音茧妒,去河邊找鬼萧吠。 笑死,一個(gè)胖子當(dāng)著我的面吹牛桐筏,可吹牛的內(nèi)容都是我干的纸型。 我是一名探鬼主播,決...
    沈念sama閱讀 39,151評(píng)論 3 410
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼狰腌!你這毒婦竟也來(lái)了除破?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 37,912評(píng)論 0 268
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤琼腔,失蹤者是張志新(化名)和其女友劉穎瑰枫,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體丹莲,經(jīng)...
    沈念sama閱讀 44,355評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡光坝,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,666評(píng)論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了甥材。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片盯另。...
    茶點(diǎn)故事閱讀 38,809評(píng)論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖洲赵,靈堂內(nèi)的尸體忽然破棺而出鸳惯,到底是詐尸還是另有隱情,我是刑警寧澤叠萍,帶...
    沈念sama閱讀 34,504評(píng)論 4 334
  • 正文 年R本政府宣布芝发,位于F島的核電站,受9級(jí)特大地震影響俭令,放射性物質(zhì)發(fā)生泄漏后德。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,150評(píng)論 3 317
  • 文/蒙蒙 一抄腔、第九天 我趴在偏房一處隱蔽的房頂上張望瓢湃。 院中可真熱鬧,春花似錦赫蛇、人聲如沸绵患。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,882評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)落蝙。三九已至,卻和暖如春暂幼,著一層夾襖步出監(jiān)牢的瞬間筏勒,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,121評(píng)論 1 267
  • 我被黑心中介騙來(lái)泰國(guó)打工旺嬉, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留管行,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,628評(píng)論 2 362
  • 正文 我出身青樓邪媳,卻偏偏與公主長(zhǎng)得像捐顷,于是被迫代替她去往敵國(guó)和親荡陷。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,724評(píng)論 2 351

推薦閱讀更多精彩內(nèi)容

  • 不定期更新 收錄各種奇葩問(wèn)題 ambari安裝之后迅涮,啟動(dòng)hive MetaStore時(shí)報(bào)錯(cuò) Solution:hi...
    Pleb_King閱讀 3,407評(píng)論 0 2
  • Spring Cloud為開(kāi)發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見(jiàn)模式的工具(例如配置管理废赞,服務(wù)發(fā)現(xiàn),斷路器叮姑,智...
    卡卡羅2017閱讀 134,638評(píng)論 18 139
  • Removing a Service (2.1.0) Verified against releases 2.1....
    杰杰微電閱讀 1,723評(píng)論 0 1
  • “死亡不是永久的告別,忘記才是”旷祸,這是《尋夢(mèng)環(huán)游記》這部動(dòng)畫(huà)片的一句電影臺(tái)詞耕拷,讓我想起了很多往事。 這部動(dòng)畫(huà)片基本...
    王世鵬閱讀 405評(píng)論 0 0
  • 在看到本文之前托享,如果讀者沒(méi)看過(guò)筆者的前文 獲取Android源碼骚烧,初識(shí)源碼模塊架構(gòu),請(qǐng)先翻閱闰围。 JNI: Java...
    Louis_陸閱讀 773評(píng)論 0 2