spark-yarn檢視叢集資源

spark-yarn檢視叢集資源

    spark-submit –master yarn –deploy-mode cluster –executor-cores 4 –num-executors 3 –executor-memory 10g –class solr.CeShi sbt-solr-assembly08.jar

Apps Submitted:總共提交了多少個JOb(122)

Apps Running:當前執行的job有多少個(3)

Apps Completed:當前提交完成的job有多少個。(119)

Containers Running:啟動的容器個數(每個容器預設一個CPU)即,啟動4個CPU預設就提供4個容器

 

VCores Used:使用了多少個CPU(6)

VCores Total:總共有多少個CPU(120)

Active Nodes:叢集總共有多少個節點(5)

Allocated Memory MB:分配了多少記憶體(10G多點)

Allocated CPU VCores:分配了多少個CPU(4)

Running Contaniers:執行了多少個容器(4)