標題:DKhadoop大數(shù)據處理平臺監(jiān)控數(shù)據介紹
2018年國內大數(shù)據公司50強榜單排名已經公布了出來,大快以黑馬之姿闖入50強,并摘得多項桂冠。Hanlp自然語言處理技術也榮膺了“2018中國數(shù)據星技術”獎。對這份榜單感興趣的可以找一下看看。本篇承接上一篇《DKM平臺監(jiān)控參數(shù)說明》,繼續(xù)就大快的大數(shù)據一體化處理架構中的平臺監(jiān)控參數(shù)進行介紹和說明。
DKhadoop大數(shù)據處理平臺架構的安裝相關文章已經分享過,詳細的內容可以找一下看看。在上一篇中已經就集群平均負載、集群磁盤使用情況、HDFS監(jiān)控界面、Hbase監(jiān)控界面等監(jiān)控參數(shù)進行說明。今天就把剩下的一些監(jiān)控參數(shù)一起介紹完,關于大快大數(shù)據處理平臺監(jiān)控參數(shù)的介紹就完整了。
1、Yarn監(jiān)控界面
(1) 執(zhí)行失敗的應用程序
監(jiān)控 yarn資源管理中總執(zhí)行失敗的應用程序數(shù)量
縱軸表示應用程序數(shù)量,單位個
橫軸表示時間,單位分鐘
(2)已提交的應用程序
監(jiān)控 yarn資源管理中已提交的應用程序數(shù)量
縱軸表示應用程序數(shù)量,單位個
橫軸表示時間,單位分鐘
(3)正在運行的應用程序
監(jiān)控 yarn資源管理中正在運行的應用程序數(shù)量
縱軸表示應用程序數(shù)量,單位個
橫軸表示時間,單位分鐘
(4) 等待執(zhí)行的應用程序
監(jiān)控 yarn資源管理中等待執(zhí)行的應用程序數(shù)量
縱軸表示應用程序數(shù)量,單位個
橫軸表示時間,單位分鐘
(5)已完成的應用程序
監(jiān)控 yarn資源管理中已完成的應用程序數(shù)量
縱軸表示應用程序數(shù)量,單位個
橫軸表示時間,單位分鐘
(6)被kill的應用程序
監(jiān)控 yarn資源管理中被殺死的應用程序數(shù)量
縱軸表示應用程序數(shù)量,單位個
橫軸表示時間,單位分鐘
2、Spark監(jiān)控界面
注意:(spark 運行任務后才有監(jiān)控數(shù)據)
(1) 大可使用內存
監(jiān)控 Spark 集群中大可使用的內存
縱軸表示內存容量,單位MB
橫軸表示時間,單位分鐘
(2)已使用的內存
監(jiān)控 Spark 集群中已經使用的內存
縱軸表示內存容量,單位MB
橫軸表示時間,單位分鐘
(3)剩余內存
監(jiān)控 Spark 集群中剩余的內存
縱軸表示內存容量,單位(MB)
橫軸表示時間,單位分鐘
(4)Spark中任務數(shù)量
監(jiān)控 Spark 集群中任務數(shù)量
縱軸表示內存容量,單位MB
橫軸表示時間,單位分鐘
(5)Spark中正在運行的任務數(shù)量
監(jiān)控 Spark中正在運行的任務數(shù)量
縱軸表示內存容量,單位MB
橫軸表示時間,單位分鐘
(6)正在運行的stage數(shù)量
監(jiān)控 Spark集群中正在運行的stage數(shù)量
縱軸表示stage數(shù)量,單位個
橫軸表示時間,單位分鐘
(7)失敗的stage數(shù)量
監(jiān)控 Spark集群中運行失敗的stage數(shù)量
縱軸表示stage數(shù)量,單位個
橫軸表示時間,單位分鐘
(8)準備就緒的stage數(shù)量
監(jiān)控 Spark集群中準備就緒的stage數(shù)量
縱軸表示stage數(shù)量,單位個
橫軸表示時間,單位分鐘
備注:
(橫軸的時間表示采集時間,一般是1分鐘一次)
另外有需要云服務器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
新聞標題:大快DKH大數(shù)據基礎服務平臺監(jiān)控參數(shù)說明(附圖文)-創(chuàng)新互聯(lián)
網站路徑:http://chinadenli.net/article32/decssc.html
成都網站建設公司_創(chuàng)新互聯(lián),為您提供網站改版、網站內鏈、網站設計、用戶體驗、全網營銷推廣、關鍵詞優(yōu)化
聲明:本網站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)