Spark日志中任务ID格式的含义

时间:2019-01-25 11:49:24

标签: apache-spark

我正在执行繁重的Spark作业,并且在一个工作节点中,我得到的日志语句如下:

@Injectable({providedIn: 'root'})
export class SampleService {
  public stringProperty: string;
}
  

我知道这里2019-01-25 06:34:41 INFO Executor:54 - Running task 163.1 in stage 0.0 (TID 168) 是任务号,但是其他   小数部分163是什么意思?

我看到其他语句没有(.1),而是.1,如下所示:

.0

1 个答案:

答案 0 :(得分:3)

那是attempt number

def id: String = s"$index.$attemptNumber"

大于0的数字表示该任务可能是由于失败而之前已经尝试过,并且已经重新安排了时间。