Hadoop中作业(job)、任务(task)和task attempt

时间：2014-12-08 23:07:04 阅读：321 评论：0 收藏：0 [点我收藏+]

hadoop中，MapReduce作业(job)ID的格式为job_201412081211_0002。这表示该作业是第二个作业（作业号从0001开始），作业开始于2014年12月8号12:11。

任务(task)属于作业，通过使用"task"替换作业ID的"job"前缀，然后在后面加上一个后缀表示哪个作业中间的任务。例如：task_201412081211_0002_m_000003，表示该任务属于job_201412081211_0002作业的第三个map任务(000003)。

由于MapReduce中的Map或者Reduce任务可能执行失败，以及Hadoop推测执行的原因，Map或者Reduce任务可能被多次执行，这就是task attempt。其ID形式为:attempt_201412081211_0002_m_000003_0，这表示该attempt属于task_201412081211_0002_m_000003任务的第一个attempt。

标签：hadoop mapreduce task task attempt

原文地址：http://blog.csdn.net/until_v/article/details/41810439

踩

(0)

评论一句话评论（0）

分享档案

更多>

2021年07月29日 (22)
2021年07月28日 (40)
2021年07月27日 (32)
2021年07月26日 (79)
2021年07月23日 (29)
2021年07月22日 (30)
2021年07月21日 (42)
2021年07月20日 (16)
2021年07月19日 (90)
2021年07月16日 (35)

周排行