yarn常用命令

zuizui1204 zuizui1204     2023-04-16     256

关键词:

转自:https://www.jianshu.com/p/f510a1f8e5f0

1,yarn top 

    类似linux里的top命令,查看正在运行的程序资源使用情况

2, yarn queue -status root.users.xxxx 

查看指定queue使用情况

3,yarn application -list -appStates 【ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,KILLED】

yarn application -list -appTypes [SUBMITTED, ACCEPTED, RUNNING]

查看app状态

yarn application -movetoqueue application_1528080031923_0067 -queue root.users.xxx

移动app到对应的队列

yarn application -kill application_1528080031923_0067

kill掉app

yarn application -status application_1528080031923_0067

查看app状态

4,yarn applicationattempt -list application_1528080031923_0064

查看app尝试信息

5,yarn classpath --glob

打印类路径

6,yarn container -list appattempt_1528080031923_0068_000001

打印正在执行任务的容器信息

yarn container -status container_1528080031923_0068_01_000002

打印当前容器信息

7,yarn jar [mainClass] args...

提交任务到yarn

8,yarn logs -applicationId application_1528080031923_0064

查看app运行日志

9,yarn node -all -list

查看所有节点信息

10,yarn daemonlog -getlevel n0:8088 rg.apache.hadoop.yarn.server.resourcemanager.rmapp.RMAppImpl

查看守护进程日志级别

11,yarn resourcemanager [-format-state-store]

RMStateStore的格式化. 如果过去的应用程序不再需要,则清理RMStateStore

12, Usage: yarn rmadmin

-refreshQueues 重载队列的ACL,状态和调度器特定的属性,ResourceManager将重载mapred-queues配置文件

-refreshNodes 动态刷新dfs.hosts和dfs.hosts.exclude配置,无需重启NameNode。

dfs.hosts:列出了允许连入NameNode的datanode清单(IP或者机器名)

dfs.hosts.exclude:列出了禁止连入NameNode的datanode清单(IP或者机器名)

重新读取hosts和exclude文件,更新允许连到Namenode的或那些需要退出或入编的Datanode的集合。

-refreshUserToGroupsMappings 刷新用户到组的映射。

-refreshSuperUserGroupsConfiguration 刷新用户组的配置

-refreshAdminAcls 刷新ResourceManager的ACL管理

-refreshServiceAclResourceManager 重载服务级别的授权文件。

-getGroups [username] 获取指定用户所属的组。

-transitionToActive [–forceactive] [–forcemanual] 尝试将目标服务转为 Active 状态。如果使用了–forceactive选项,不需要核对非Active节点。如果采用了自动故障转移,这个命令不能使用。虽然你可以重写–forcemanual选项,你需要谨慎。

-transitionToStandby [–forcemanual] 将服务转为 Standby 状态. 如果采用了自动故障转移,这个命令不能使用。虽然你可以重写–forcemanual选项,你需要谨慎。

-failover [–forceactive] 启动从serviceId1 到 serviceId2的故障转移。如果使用了-forceactive选项,即使服务没有准备,也会尝试故障转移到目标服务。如果采用了自动故障转移,这个命令不能使用。

-getServiceState 返回服务的状态。(注:ResourceManager不是HA的时候,时不能运行该命令的)

-checkHealth 请求服务器执行健康检查,如果检查失败,RMAdmin将用一个非零标示退出。(注:ResourceManager不是HA的时候,时不能运行该命令的)

-help [cmd]显示指定命令的帮助,如果没有指定,则显示命令的帮助。



作者:scottzcw
链接:https://www.jianshu.com/p/f510a1f8e5f0
来源:简书
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

npm与yarn常用命令对比(代码片段)

npm与yarn命令对比作为记录,以备查阅npmyarnnpminityarninit//初始化npmi|installyarn(install)//安装依赖包npmix--S|--saveyarnaddx//安装生产依赖并保存包名npmix--D|--save-devyarnaddx-D//安装开发依赖并保存包名npmun|uninstallxyarnremove//删除依赖包npmi-g|np 查看详情

yarn管理命令

...些命令中,jar、applocation、node、logs、calsspath、和version是常用的用户命令,而resourcemanager、nodemanager、proxyserver、rmadmin和daemonlog是较为常用的管理类命令application命令:用来管理yarn集群中的作业的查看作业[[email protected] ~]$... 查看详情

yarn常用命令(基于vue框架)

初始化项目yarnaddinit安装vueyarnaddvue安装webpack,webpack-dev-server(是一个小型的Node.jsExpress服务器)yarnaddwebpackwebpack-dev-server安装babel,babel的作用是将es6的语法编译成浏览器认识的语法es5yarnaddbabelbabel-corebabel-loaderbabel-preset 查看详情

yarn的安装和常用命令

...性,使其在不同系统上也能无差别的工作   yarn最常用最基础的命令和npm对比  npminit/ yarninit 初始化  mkdir文件名/  md 文件名  npminstall/yarn或yarninstall 安装依赖  npminstallpackage--save-dev / ... 查看详情

yarn常用命令

参考技术A1,yarntop: 类似linux里的top命令,查看正在运行的程序资源使用情况2,yarnqueue-status 队列名:查看指定queue使用情况3,yarnapplication-list-appStates【ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,KILLED】yarnapplication-list... 查看详情

yarn常用命令小结

参考技术A1.yarntop     类似linux里的top命令,查看正在运行的程序资源使用情况2,yarnqueue-statusroot.users.xxxx 查看指定queue使用情况3,yarnapplication-list-appStates【ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,KILLED... 查看详情

yarn常用命令

转自:https://www.jianshu.com/p/f510a1f8e5f01,yarntop     类似linux里的top命令,查看正在运行的程序资源使用情况2,yarnqueue-statusroot.users.xxxx 查看指定queue使用情况3,yarnapplication-list-appStates【ALL,NEW,NEW_SAVING,SUBMITTED,ACCE... 查看详情

hadoop3.1.3的yarn常用命令yarnnode查看节点状态(代码片段)

1、yarnapplication查看任务Yarn状态的查询,除了可以在hadoop21:8088页面查看外,还可以通过命令操作。常见的命令操作如下所示:1.1、列出所有Application:[kgf@hadoop21hadoop-3.1.3]$yarnapplication-list2022-06-1414:21:19,003IN 查看详情

yarn笔记

常用命令:创建项目:yarninit安装依赖包:yarn == yarninstall添加依赖包:yarnaddYarn命令列表 命令操作参数标签yarnadd添加依赖包包名--dev/-Dyarnbin显示yarn安装目录无无yarncache显示缓存列出缓存包:ls,打出缓存目录路径:di... 查看详情

yarn-cli简介

...里按照字母顺序列出了我们提供的所有命令,但是某些更常用的命令还是要着重提一下:yarnadd:为当前包添加一个依赖包。yarninit:初始化一个包。yarninstall:依照package.json文件列出的依赖安装所有依赖包。yarnpublish:发布一个包到包... 查看详情

hadoop常用命令总结

一、前述分享一篇hadoop的常用命令的总结,将常用的Hadoop命令总结如下。二、具体1、启动hadoop所有进程start-all.sh等价于start-dfs.sh+start-yarn.sh但是一般不推荐使用start-all.sh(因为开源框架中内部命令启动有很多问题)。2、单进程启动... 查看详情

npmyarn简单使用记录

npm、yarn常用命令记录,后续会陆续补充...经过使用发现yarn再下包是速度快,所以日常以yarn指令应用为主 npm查看仓库地址:npmconfiggetregistrynpm设置淘宝镜像:npmconfigsetregistryhttp://registry.npm.taobao.org/npm还原仓库地址:npmconfigsetr... 查看详情

hadoop-yarn(代码片段)

Hadoop-Yarn1Yarn资源调度器1.1Yarn基础架构1.2Yarn工作机制1.3作业提交全过程1.4Yarn调度器和调度算法1.4.1先进先出调度器(FIFO)1.4.2容量调度器(CapacityScheduler)1.4.3公平调度器(FairScheduler)1.5Yarn常用命令1.5.1ya 查看详情

hadoop-yarn常用的调优参数(代码片段)

调优参数列表(1)Resourcemanager相关yarn.resourcemanager.scheduler.client.thread-countResourceManager处理调度器请求的线程数量yarn.resourcemanager.scheduler.class  配置调度器(2)Nodemanager相关yarn.nodem 查看详情

yarn(含mr2)常用配置(代码片段)

文章目录YARN架构图YARN工作机制调度器资源调度器的类最大优先级处理调度器请求的线程数量NodeManager单节点NN可分配的物理内存单节点NN可分配的虚拟核心数单节点预留给非YARN进程的物理内存总量每个容器可分配的最小内存每个... 查看详情

我已经用 brew 更新了 yarn,但我不再能够运行 yarn 命令

】我已经用brew更新了yarn,但我不再能够运行yarn命令【英文标题】:IhaveupdatedyarnwithbrewandIamnolongerabletoruntheyarncommand【发布时间】:2020-08-0412:02:23【问题描述】:我已使用brew更新了yarn,但我不再能够运行yarn命令。我尝试从brew和n... 查看详情

yarn不是内部或外部命令......

参考技术A3、配置环境变量,安装地址不同会需要修改:4、yarn-v  查看版本  安装成功。 查看详情

“yarn build”命令有啥作用? “npm build”和“yarn build”是相似的命令吗?

】“yarnbuild”命令有啥作用?“npmbuild”和“yarnbuild”是相似的命令吗?【英文标题】:Whatdoes"yarnbuild"commanddo?Are"npmbuild"and"yarnbuild"similarcommands?“yarnbuild”命令有什么作用?“npmbuild”和“yarnbuild”是相似... 查看详情