1.文檔編寫目的
本篇文章主要介紹在Cloudera Manager 界面圖表簡單說明以及如何在CM界面通過tsquery創建自定義圖表
- 內容概述
1.文檔說明
2.圖表及tsquery簡述
3.自定義圖表示例
- 測試環境
1.CM和CDH版本為CDH 5.16.1
2.操作系統版本為RedHat 7.2
2.圖表及tsquery簡述
在Cloudera Manager(以下簡稱CM) 中我們可以看到各種類型的圖表，包括CPU、HDFS IO、Impala 已完成隊列的等等，而這些在CM界面都可以通過tsquery語句(tsquery是Cloudera Manager按時間序列的方式從存儲數據中檢索數據的語句) 來進行構建。
2.1.圖表操作簡介
在CM主頁中當安裝完hadoop核心組件後默認會有如下圖表:
需要查看圖表明細也可以通過將鼠標放在圖表上，點擊如下圖所示的放大圖表查看
也可以在圖表右上角的
圖表中在圖表生成器中打開，選擇要查看圖表的時間段和圖表類型等
另外在每個組件中狀態和圖表庫中也有很豐富的圖表內容
2.2.自定義圖表簡介
除了上述的圖表外，也可以在CM主頁中選擇 圖表>圖表生成器 中或者點擊下圖圈出的標籤，在圖表生成器頁面通過tsquery來構建自定義圖表。
使用自定義圖表，首先需要對tsquery 有所瞭解，以下是tsquery一些常見的查詢
1、按時間序列檢索所有DataNode的所有指標。
select * where roleType = DATANODE
2、按時間序列檢索所有DataNode的 cpu_user_rate(用戶cpu時間)
select cpu_user_rate where roleType=DATANODE
3、按時間序列檢索主機名為“cdh2.macro.com”的主機上運行的所有角色 jvm_heap_used_mb(已使用的jvm堆內存) 除以1024和 jvm_heap_committed_mb(提交的jvm堆內存) ，除以1024。
select jvm_heap_used_mb/1024, jvm_heap_committed_mb/1024 where category=ROLE and hostname="cdh2.macro.com"
4、按時間序列檢索 Cloudera Manager收集 jvm_total_threads(jvm線程總數) 和 jvm_blocked_threads(被阻止的jvm線程數)兩個指標
select jvm_total_threads,jvm_blocked_threads
下圖是tsquery支持的部分函數，完整列表請查看參考文檔：
下圖是where 語句後可以添加的篩選條件：
3.自定義圖表示例
除了上述簡單官網介紹的示例外，下面簡單介紹幾個自定義的圖表
3.1.集群整體內存使用情況圖表示例
SELECT physical_memory_used_across_hosts WHERE entityName = "1" AND category = CLUSTER
在CM 提供的查詢語法中可以看到如下的關鍵字匹配
輸入完成後點擊構建圖表，放大後查看可以看到如下圖表，以及每個節點的內存使用分配信息和詳細信息等
在圖表生成器中生成後，可點保存，比如將圖表保存到主頁中
保存後如下：
3.2.某個或者某些主機的CPU使用情況示例
如果你需要對某個或者某些主機或者某個機架進行CPU使用情況圖表進行查看，語句如下:
SELECT cpu_percent where entityName="f1ee68ed-debb-4119-a398-44edb84eaabd" OR entityName="1d3296c7-5121-4dd4-8cb2-ef81913c7bd5"
#或者使用hostname 方式，與上一個tsquery 的結果一致
SELECT cpu_percent where hostname="cdh1.macro.com" OR hostname="cdh3.macro.com"
#查看機架/rack1 中的機器CPU 使用率
SELECT cpu_percent WHERE rackId="/rack1"
或者查詢所有的cpu_percent ,然後通過下面圈出來的部分進行篩選
3.3.yarn:root資源池下所有YARN 作業情況查看示例
SELECT apps_running_cumulative,apps_killed_cumulative_rate,apps_failed_cumulative_rate,apps_completed_rate WHERE entityName = "yarn:root" AND category = YARN_POOL
參考：
https://www.cloudera.com/documentation/enterprise/6/latest/topics/cm_dg_tsquery.html#concept_d2g_k11_dk
閱讀更多 Hadoop實操 的文章
