1. 程式人生 > >0036-如何通過CM API優雅的獲取元數據庫密碼

0036-如何通過CM API優雅的獲取元數據庫密碼

edi navi raft 可能 oracl code eas 技術分享 5.1

溫馨提示:要看高清無碼套圖,請使用手機打開並單擊圖片放大查看。

1.問題描述


人啊,上了年紀了,總容易忘記一些事情,比如你一不小心就忘記了CDH集群Hive,Hue和Sentry服務的元數據庫密碼,對於數據庫(MySQL/Oracle/PostgreSQL)管理員來說,可能有自己獨特的一些奇技淫巧來找回密碼。但對於咱普通人,其實Cloudera Manger提供了一種很優雅的方式讓你找回元數據庫密碼,那就是神奇的Cloudera Manager API。

2.解決方法

2.1通過HTTP方式


1.獲取Cloudera Manager所有集群信息

在瀏覽器輸入如下地址,將<cmserver>替換為CM的IP地址

http://<cmserver>:7180/api/v10/clusters/

輸入CM的賬號密碼

技術分享圖片

獲取集群信息:

{
  "items" : [ {
    "name" : "cluster",
    "displayName" : "Cluster 1",
    "version" : "CDH5",
    "fullVersion" : "5.11.2",
    "maintenanceMode" : false,
    "maintenanceOwners" : [ ],
    "clusterUrl" : "http://ip-172-31-22-86.ap-southeast-1.compute.internal:7180/cmf/clusterRedirect/cluster"
  } ]
}

技術分享圖片

2.通過上一步獲取的集群信息,獲取指定集群的Services

在瀏覽器輸入如下地址,將<cmserver>替換成CM的IP地址,<cluster_name>替換為上一步中獲取到的集群名稱

http://<cmserver>:7180/api/v10/clusters/<cluster_name>/services/

技術分享圖片

{
  "items" : [ …{
    "name" : "hue",
    "type" : "HUE",
    "clusterRef" : {
      "clusterName" : "cluster"
    },
    "serviceUrl" : "http://ip-172-31-22-86.ap-southeast-1.compute.internal:7180/cmf/serviceRedirect/hue",
    "serviceState" : "STARTED",
    "healthSummary" : "GOOD",
    "healthChecks" : [ {
      "name" : "HUE_HUE_SERVERS_HEALTHY",
      "summary" : "GOOD"
    } ],
    "configStalenessStatus" : "FRESH",
    "clientConfigStalenessStatus" : "FRESH",
    "maintenanceMode" : false,
    "maintenanceOwners" : [ ],
    "displayName" : "Hue"
  } …]
}

以上為獲取到的json數據片段,標紅部分為Services名稱。

3.通過服務名稱獲取,該服務的配置信息

在瀏覽器輸入如下地址,將<cmserver>替換成CM的IP地址,<cluster_name>替換為集群名稱,將<service_name>替換為指定服務的名稱

http://<cmserver>:7180/api/v10/clusters/<cluster_name>/services/<service_name>/config

技術分享圖片

{
  "items" : [ {
    "name" : "database_host",
    "value" : "ip-172-31-22-86.ap-southeast-1.compute.internal"
  }, {
    "name" : "database_password",
    "value" : "password"
  }, {
    "name" : "database_type",
    "value" : "mysql"
  }... ]
}

這樣就獲取到了相應服務的配置信息,標紅部分即為該服務的數據庫密碼。

2.2命令行方式


1.獲取集群信息

將<cm_admin_user>替換為CM的用戶名,<cm_admin_pass>替換為CM對應用戶密碼,<cmserver>替換為CM的IP地址

curl -v -k -X GET -u <cm_admin_user>:<cm_admin_pass> http://<cmserver>:7180/api/v10/clusters/

命令行執行

[ec2-user@ip-172-31-22-86 ~]$ curl -v -k -X GET -u admin:admin http://ip-172-31-22-86:7180/api/v10/clusters/
...
{
  "items" : [ {
    "name" : "cluster",
    "displayName" : "Cluster 1",
    "version" : "CDH5",
    "fullVersion" : "5.11.2",
    "maintenanceMode" : false,
    "maintenanceOwners" : [ ],
    "clusterUrl" : "http://ip-172-31-22-86.ap-southeast-1.compute.internal:7180/cmf/clusterRedirect/cluster"
  } ]
* Connection #0 to host ip-172-31-22-86 left intact
}
[ec2-user@ip-172-31-22-86 ~]$ 

技術分享圖片

標註部分為獲取到的集群名稱。

2.獲取指定集群的Services

將如下命令中相應參數替換,<cloudera_name>替換為上一步獲取到的集群名稱

curl -v -k -X GET -u <cm_admin_user>:<cm_admin_pass> http://<cmserver>:7180/api/v10/clusters/<cluster_name>/services/

命令行執行:

[ec2-user@ip-172-31-22-86 ~]$ curl -v -k -X GET -u admin:admin http://ip-172-31-22-86:7180/api/v10/clusters/cluster/services/
...
{
  "items" : [ {
    "name" : "hive",
    "type" : "HIVE",
    "clusterRef" : {
      "clusterName" : "cluster"
    },
    "serviceUrl" : "http://ip-172-31-22-86.ap-southeast-1.compute.internal:7180/cmf/serviceRedirect/hive",
    "serviceState" : "STARTED",
    "healthSummary" : "GOOD",
    "healthChecks" : [ {
      "name" : "HIVE_HIVEMETASTORES_HEALTHY",
      "summary" : "GOOD"
    }, {
      "name" : "HIVE_HIVESERVER2S_HEALTHY",
      "summary" : "GOOD"
    } ],
    "configStalenessStatus" : "FRESH",
    "clientConfigStalenessStatus" : "FRESH",
    "maintenanceMode" : false,
    "maintenanceOwners" : [ ],
    "displayName" : "Hive"
  } ...]
}
[ec2-user@ip-172-31-22-86 ~]$ 

技術分享圖片

標註部分為服務名稱。

3.根據獲取到的Service名稱,獲取該服務的配置

將一下命令中參數替換為自己環境信息,<service_name>替換為上一步獲取到的服務名稱。

curl -v -k -X GET -u <cm_admin_user>: <cm_admin_pass>http://<cmserver>:7180/api/v10/clusters/<cluster_name>/services/<service_name>/config

命令行執行:

[ec2-user@ip-172-31-22-86 ~]$ curl -v -k -X GET -u admin:admin http://ip-172-31-22-86:7180/api/v10/clusters/cluster/services/hive/config
...
{
  "items" : [ {
    "name" : "hive_metastore_database_host",
    "value" : "ip-172-31-22-86.ap-southeast-1.compute.internal"
  }, {
    "name" : "hive_metastore_database_password",
    "value" : "password"
  }, {
    "name" : "mapreduce_yarn_service",
    "value" : "yarn"
  }, {
    "name" : "zookeeper_service",
    "value" : "zookeeper"
  } ]
* Connection #0 to host ip-172-31-22-86 left intact
}
[ec2-user@ip-172-31-22-86 ~]$ 

技術分享圖片

上圖標註部分即為hive服務元數據庫的密碼。

3.總結


通過以上兩種方式可以獲取Hue、Hive、Sentry服務元數據庫密碼,但不支持獲取Oozie、AM、CM、RM、Navigator等服務的數據庫密碼。註意:以上操作需要使用CM的管理員用戶獲取,非管理員用戶獲取的密碼顯示為“REDACTED”。

更多關於CM的API接口可參考官網:

https://×××w.cloudera.com/documentation/enterprise/latest/topics/cm\_intro\_api.html

醉酒鞭名馬,少年多浮誇! 嶺南浣溪沙,嘔吐酒肆下!摯友不肯放,數據玩的花!
溫馨提示:要看高清無碼套圖,請使用手機打開並單擊圖片放大查看。

推薦關註Hadoop實操,第一時間,分享更多Hadoop幹貨,歡迎轉發和分享。

技術分享圖片
原創文章,歡迎轉載,轉載請註明:轉載自微信公眾號Hadoop實操

0036-如何通過CM API優雅的獲取元數據庫密碼