教育行業(yè)A股IPO第一股(股票代碼 003032)

全國咨詢/投訴熱線:400-618-4000

問答>python+大數(shù)據(jù)開發(fā)>applicationmaster是什么?

applicationmaster是什么?

來源傳智教育2022年06月28日 14時(shí)52分33秒

  用戶提交的每個(gè)應(yīng)用程序都包含一個(gè)ApplicationMaster,它負(fù)責(zé)協(xié)調(diào)來自ResourceManager的資源,把獲得的資源分配給內(nèi)部的各個(gè)任務(wù),從而實(shí)現(xiàn)“二次分配”。除此之外,ApplicationMaster還會(huì)通過NodeManager監(jiān)控容器的執(zhí)行和資源使用情況,并在任務(wù)運(yùn)行失敗時(shí)重新為任務(wù)申請(qǐng)資源以重啟任務(wù)。當(dāng)前的YARN自帶了兩個(gè)ApplicationMaster的實(shí)現(xiàn),一個(gè)是用于演示ApplicationMaster編寫方法的實(shí)例程序DistributedShell,它可以申請(qǐng)一定數(shù)目的Container以并行方式運(yùn)行一個(gè)Shell命令或者Shell腳本;另一個(gè)則是運(yùn)行MapReduce應(yīng)用程序的ApplicationMaster-MRAppMaster。

  需要注意的是,ResourceManager負(fù)責(zé)監(jiān)控ApplicationMaster, 并在ApplicationMaster運(yùn)行失敗的時(shí)候重啟,大大提高集群的拓展性。ResourceManager不負(fù)責(zé)ApplicationMaster內(nèi)部任務(wù)的容錯(cuò),任務(wù)的容錯(cuò)由ApplicationMaster完成,總體來說,ApplicationMaster的主要功能是資源的調(diào)度、監(jiān)控與容錯(cuò)。

和我們?cè)诰€交談!