Yarn資源調度過程詳細

Yarn采用的雙層調度框架，RM將資源分配給AM，AM再將資源進一步分配給Task，資源不夠時會為TASK預留，直到資源充足。在Hadoop0中我們分配資源通過slot實現(xiàn)，但是在Yarn中，直接分配資源。

成都創(chuàng)新互聯(lián)是專業(yè)的興平網(wǎng)站建設公司，興平接單;提供成都網(wǎng)站建設、做網(wǎng)站,網(wǎng)頁設計,網(wǎng)站設計,建網(wǎng)站,PHP網(wǎng)站建設等專業(yè)做網(wǎng)站服務;采用PHP框架,可快速的進行興平網(wǎng)站開發(fā)網(wǎng)頁制作和功能擴展;專業(yè)做搜索引擎喜愛的網(wǎng)站,專業(yè)的做網(wǎng)站團隊,希望更多企業(yè)前來合作!

YARN 調度器的工作就是根據(jù)既定策略為應用能夠分配資源。

在Yarn中有是三種調度器可以選擇：FIFO Scheduler，Capacity Scheduler，F(xiàn)air Scheduler。

yarn的運行流程 步驟1　用戶向YARN中提交應用程序，其中包括ApplicationMaster程序、啟動ApplicationMaster的命令、用戶程序等。

上節(jié)課我們講了 MR job的提交YARN的工作流程 與 YARN的架構，本次課程詳細講講YARN，多多總結。

用戶向YARN提交一個應用程序后，YARN將分為兩個階段運行該應用程序：第一個階段是啟動ApplicationMaster；第二個階段是由ApplicationMaster創(chuàng)建應用程序，為它申請資源，并監(jiān)控它的整個運行過程，直到運行成功。

Yarn知識

1、Container ：是YARN中的資源抽象，它封裝了某個節(jié)點上的多維度資源，如內存、CPU、磁盤、網(wǎng)絡等，當AM向RM申請資源時，RM為AM返回的資源便是用Container 表示的。YARN會為每個任務分配一個Container且該任務只能使用該Container中描述的資源。

2、yarn是一個進行nodejs包管理的工具，可以方便管理nodejs依賴包，功能類似npm，但是包依賴管理上更方便。

3、NYLON FILAMENT YARN 尼龍絲 NYLON DTY 尼龍加工絲 PAN 聚丙烯腈 腈綸 PVA 聚乙烯醇 維綸 面料知識知多少 第二節(jié) 純毛面料的鑒別 純毛面料色澤自然柔和、保暖效果好、是制作高檔西服和大衣的首選面料。

yarn常用命令

1、很顯然 packageManager 項就是用來設置 @vue/cli 的包管理器的，將它從 npm 改為 yarn 。

2、Container：是YARN中的資源抽象，它封裝了某個節(jié)點上的多維度資源，如內存、 CPU、磁盤、網(wǎng)絡等，當AM向RM申請資源時，RM為AM返回的資源便是用Container 表示的。

3、具體操作：對比：lerna 善于版本管理，yarn monorepo 更方便點。 常用命令：1，關聯(lián)性強的項目組成monorepo（開發(fā)時相互關聯(lián)）。可以統(tǒng)一依賴管理，開發(fā)周期在一起。 2，復雜基礎庫，組件庫可以單獨monorepo。

4、偽分布式是指在一臺計算機上通過虛擬機實現(xiàn)的分布式系統(tǒng)。在偽分布式環(huán)境中，可以使用shell命令來操作分布式系統(tǒng)。常用的偽分布式shell命令包括：- start-all.sh：啟動所有的Hadoop守護進程。

新聞名稱：yarnlinux命令 yarn jar命令
網(wǎng)頁網(wǎng)址：http://chinadenli.net/article36/dcioepg.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供標簽優(yōu)化、微信公眾號、響應式網(wǎng)站、網(wǎng)站內鏈、Google、

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)