千锋教育-做有情怀、有良心、有品质的职业教育机构

手机站
千锋教育

千锋学习站 | 随时随地免费学

千锋教育

扫一扫进入千锋手机站

领取全套视频
千锋教育

关注千锋学习站小程序
随时随地免费学习课程

当前位置:首页  >  技术干货  > yarn有哪些调度及常用命令?

yarn有哪些调度及常用命令?

来源:千锋教育
发布人:syq
时间: 2022-06-29 16:57:51 1656493071

  1.yarn有哪些调度

  FIFO:单队列 先进先出 小任务易阻塞

  CAPACITY:多队列 各队列资源固定 小任务可同时运行,可弹性使用资源

yarn有哪些调度及常用命令

  每个队列都可以设置最大值,不设置的话可用到整个父队列的资源最大值(正好有空闲时);

  FAIR:多队列 各队列资源\动态抢占** 小任务可同时运行

  队列创建时:除非队列被准确的定义,否则会以用户名为队列名创建队列

  抢占就是允许调度器杀掉占用超过其应占份额资源队列的containers,这些containers资源便可被分配到应该享有这些份额资源的队列中。

  默认调度器

  Apache 开源:CAPACITY

  CDH版本:FAIR

  2.常用命令

  yarn logs -applicationId application15391986545221073695 |more

  2.1查看 Job 信息:

  hadoop job -list

  2.2杀掉 Job:

  hadoop job –kill job_id

  hadoop job –status job_id

  更多关于大数据培训的问题,欢迎咨询千锋教育在线名师。千锋教育拥有多年IT培训服务经验,采用全程面授高品质、高体验培养模式,拥有国内一体化教学管理及学员服务,助力更多学员实现高薪梦想。

tags:
声明:本站稿件版权均属千锋教育所有,未经许可不得擅自转载。
10年以上业内强师集结,手把手带你蜕变精英
请您保持通讯畅通,专属学习老师24小时内将与您1V1沟通
免费领取
今日已有369人领取成功
刘同学 138****2860 刚刚成功领取
王同学 131****2015 刚刚成功领取
张同学 133****4652 刚刚成功领取
李同学 135****8607 刚刚成功领取
杨同学 132****5667 刚刚成功领取
岳同学 134****6652 刚刚成功领取
梁同学 157****2950 刚刚成功领取
刘同学 189****1015 刚刚成功领取
张同学 155****4678 刚刚成功领取
邹同学 139****2907 刚刚成功领取
董同学 138****2867 刚刚成功领取
周同学 136****3602 刚刚成功领取
相关推荐HOT