成都创新互联网站制作重庆分公司

yarn管理命令怎么用-创新互联

这篇文章主要介绍yarn管理命令怎么用,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

成都创新互联专注于渠县网站建设服务及定制,我们拥有丰富的企业做网站经验。 热诚为您提供渠县营销型网站建设,渠县网站制作、渠县网页设计、渠县网站官网定制、小程序设计服务,打造渠县网络公司原创品牌,更为您提供渠县网站排名全网营销落地服务。

yarn管理命令怎么用

这些命令中,jar、applocation、node、logs、calsspath、和version是常用的用户命令,而resourcemanager、nodemanager、proxyserver、rmadmin和daemonlog是较为常用的管理类命令

application命令:

用来管理yarn集群中的作业的

查看作业

[hadoop@node1 ~]$ yarn application -list
18/03/27 17:49:41 INFO client.RMProxy: Connecting to ResourceManager at master/172.16.2.3:8032
Total number of applications (application-types: [] and states: [SUBMITTED, ACCEPTED, RUNNING]):0
                Application-Id      Application-Name        Application-Type          User           Queue                   State             Final-State          Progress                         Tracking-URL

node:查看datanode节点信息

[hadoop@node1 ~]$ yarn node --list

18/03/27 17:55:12 INFO client.RMProxy: Connecting to ResourceManager at master/172.16.2.3:8032

Total Nodes:3

     Node-Id       Node-State Node-Http-Address    Number-of-Running-Containers

node3.hadooptest.com:56712       RUNNING node3.hadooptest.com:8042                 0

node2.hadooptest.com:55089       RUNNING node2.hadooptest.com:8042                 0

node4.hadooptest.com:56630       RUNNING node4.hadooptest.com:8042                 0

只查看RUNNING状态的节点

[hadoop@node1 ~]$ yarn node -list -states RUNNING
18/03/27 17:58:31 INFO client.RMProxy: Connecting to ResourceManager at master/172.16.2.3:8032
Total Nodes:3
         Node-Id             Node-State Node-Http-Address       Number-of-Running-Containers
node3.hadooptest.com:56712              RUNNING node3.hadooptest.com:8042                                  0
node2.hadooptest.com:55089              RUNNING node2.hadooptest.com:8042                                  0
node4.hadooptest.com:56630              RUNNING node4.hadooptest.com:8042                                  0

查看某一节点的状态

[hadoop@node1 ~]$ yarn node -status node3.hadooptest.com:56712  
18/03/27 18:00:10 INFO client.RMProxy: Connecting to ResourceManager at master/172.16.2.3:8032
Node Report : 
        Node-Id : node3.hadooptest.com:56712
        Rack : /default-rack
        Node-State : RUNNING
        Node-Http-Address : node3.hadooptest.com:8042
        Last-Health-Update : Tue 27/Mar/18 05:59:22:318CST
        Health-Report : 
        Containers : 0
        Memory-Used : 0MB
        Memory-Capacity : 8192MB
        CPU-Used : 0 vcores
        CPU-Capacity : 8 vcores
        Node-Labels :

logs:

用于从已经完成的YARN应用程序(即状态为FAILED、KILLED或者FINISHED)上获取日志信息。不过,如果需要通过命令行查看日志,

需要为YARN集群启用log-aggregation属性,在yarn-site.xml配置文件中定义yarn.log-aggregation-enable属性的值为true即可。命令的简要用法格式如下

yarn logs -applicationID

常用选项:

-applicationID applicationID:必备选项,用于从ResourceManager获取其详细信息;

-appOwner AppOwner: 可选选项,默认为当前用户

    -nodeAddress NodeAddress -containerId containerID:用于获取指定节点上指定容器的相关信息,其中NodeAddress的格式同NodeId

yarn管理命令怎么用

rmadmin

-help: 获取命令帮助

-refreshNode: 为RM刷新主机信息,它通过读取RM节点的include和exclude文件来更新集群需要包含或者排除的节点列表

-refreshUserToGroupsMappings: 根据配置的Hadoop安全组映射,通过刷新组缓存中的信息来更新用户和组之间的映射关系

-refreshSuperUserGroupsConfiguration: 刷新超级用户代理组映射,以及更新代理主机和core-site.xml配置文件中hadoop.proxyuser属性定义的代理组

-refreshAdminAcls:根据yarn站点配置文件或默认配置文件中的yarn.admin.acl属性刷新RM的管理ACL

[hadoop@node1 ~]$ yarn rmadmin -refreshNodes 
18/03/27 18:22:43 INFO client.RMProxy: Connecting to ResourceManager at master/172.16.2.3:8033
[hadoop@node1 ~]$

refresh命令要慎用,影响很大


DaemonLog

用于查看或者更新RM以及NM守护进程的日志级别,它会在检查管理权限通过后在内部直接连接至“http://host:port/logLevel?log=name service”。

常用选项:

-getLevel host:port name:显示指定守护进程的日志级别

-setLevel host:port name level:设置守护进程的日志级别

以上是“yarn管理命令怎么用”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


新闻标题:yarn管理命令怎么用-创新互联
网址分享:http://cxhlcq.com/article/dchhid.html

其他资讯

在线咨询

微信咨询

电话咨询

028-86922220(工作日)

18980820575(7×24)

提交需求

返回顶部