码迷,mamicode.com
首页 > 其他好文 > 详细

hadoop设置公平队列

时间:2014-07-16 18:31:19      阅读:213      评论:0      收藏:0      [点我收藏+]

标签:blog   http   使用   io   html   div   

http://hadoop.apache.org/docs/r1.2.1/fair_scheduler.html

fair-scheduler.xml文档

<?xml version="1.0"?>  
<allocations>  
  <pool name="test_pool">
    <minMaps>5</minMaps>
    <minReduces>5</minReduces>
    <maxMaps>15</maxMaps>
    <maxReduces>15</maxReduces>
    <minSharePreemptionTimeout>300</minSharePreemptionTimeout>
  </pool>
  <user name="app">
    <maxRunningJobs>5</maxRunningJobs>
  </user>
  <user name="ronnie.zhang">
    <maxRunningJobs>5</maxRunningJobs>
  </user>
  <user name="dean.wu">
    <maxRunningJobs>5</maxRunningJobs>
  </user>
  <userMaxJobsDefault>3</userMaxJobsDefault>
  <fairSharePreemptionTimeout>600</fairSharePreemptionTimeout>
</allocations>

  mapred-site.xml文档中添加

   <property>
      <name>mapred.jobtracker.taskScheduler</name>
      <value>org.apache.hadoop.mapred.FairScheduler</value>
    </property>

默认使用FIFO队列。

 

hadoop设置公平队列,布布扣,bubuko.com

hadoop设置公平队列

标签:blog   http   使用   io   html   div   

原文地址:http://www.cnblogs.com/silenceli/p/3845199.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!