我正在尝试在云ML中运行一份工作。这是第一个,所以我没有做任何想象(或者我不知道)。我在当地尝试过这项工作并且工作正常。我正在提交这样的工作:
gcloud ml-engine jobs submit training $JOB_NAME --job-dir $OUTPUT --module-name trainer.task --package-path trainer/ --runtime-version 1.2 -- --train-files $TRAIN_DATA --eval-files $EVAL_DATA --verbosity DEBUG
我需要一个setup.py文件,因为我需要1.4。
我在cloud ml工作中遇到以下错误:
17:37:18.590 master-replica-0 grpc epoll fd: 4
{
insertId: "3bz8czg6uycja0"
jsonPayload: {
created: 1511887038.59055
levelname: "ERROR"
lineno: 1051
message: " grpc epoll fd: 4"
pathname: "ev_epoll1_linux.c"
thread: 228
}
labels: {
compute.googleapis.com/resource_id: "56570433820965707"
compute.googleapis.com/resource_name: "cmle-training-master-93c1f629dc-0-1sbpv"
compute.googleapis.com/zone: "europe-west1-c"
ml.googleapis.com/job_id: "XXXXX"
ml.googleapis.com/job_id/log_area: "root"
ml.googleapis.com/task_name: "master-replica-0"
ml.googleapis.com/trial_id: ""
}
logName: "projects/fibi-tech/logs/master-replica-0"
receiveTimestamp: "2017-11-28T16:37:27.139888642Z"
resource: {
labels: {…}
type: "ml_job"
}
severity: "ERROR"
timestamp: "2017-11-28T16:37:18.590551137Z"
}
错误之后没有其他事情发生(至少不会持续十分钟),我必须手动停止工作。
谢谢!
答案 0 :(得分:0)
我使用带有ml-engine的Estimator API有类似的问题。解决方案是使用tf.estimator.train_and_eval()
。请参阅我的其他帖子ml-engine vague error: "grpc epoll fd: 3"