首页 > 大数据 > [Hadoop]The number of tasks for this job 312292 exceeds the configured limit 250000

[Hadoop]The number of tasks for this job 312292 exceeds the configured limit 250000

hadoop提交任务时提示:The number of tasks for this job 312292 exceeds the configured limit 250000.
出现这个错误时, 需要修改每个任务的限制的task数。
在streaming模式下,需要添加一个配置,大于自己所需的任务数(312292)即可:

-D mapred.jobtracker.maxtasks.per.job=320000
  1. IT疯狂女 8月 18th, 2015 @ 17:23 | #1

    这方面的东东对我来说完全就是一张白纸

评论提交中, 请稍候...

留言

可以使用的标签: <a href="" title=""> <abbr title=""> <acronym title=""> <b> <blockquote cite=""> <cite> <code> <del datetime=""> <em> <i> <q cite=""> <s> <strike> <strong>
Trackbacks & Pingbacks ( 0 )
  1. 还没有 trackbacks