grpc epoll fd:云ml工作中有4个错误

时间:2017-11-28 17:05:47

标签: google-cloud-ml

我正在尝试在云ML中运行一份工作。这是第一个,所以我没有做任何想象(或者我不知道)。我在当地尝试过这项工作并且工作正常。我正在提交这样的工作:

gcloud ml-engine jobs submit training $JOB_NAME --job-dir $OUTPUT --module-name trainer.task --package-path trainer/ --runtime-version 1.2 -- --train-files $TRAIN_DATA --eval-files $EVAL_DATA --verbosity DEBUG

我需要一个setup.py文件,因为我需要1.4。

我在cloud ml工作中遇到以下错误:

17:37:18.590 master-replica-0 grpc epoll fd: 4
{
 insertId:  "3bz8czg6uycja0"   
 jsonPayload: {
  created:  1511887038.59055    
  levelname:  "ERROR"    
  lineno:  1051    
  message:  "    grpc epoll fd: 4"    
  pathname:  "ev_epoll1_linux.c"    
  thread:  228    
 }
 labels: {
  compute.googleapis.com/resource_id:  "56570433820965707"    
  compute.googleapis.com/resource_name:  "cmle-training-master-93c1f629dc-0-1sbpv"    
  compute.googleapis.com/zone:  "europe-west1-c"    
  ml.googleapis.com/job_id:  "XXXXX"    
  ml.googleapis.com/job_id/log_area:  "root"    
  ml.googleapis.com/task_name:  "master-replica-0"    
  ml.googleapis.com/trial_id:  ""    
 }
 logName:  "projects/fibi-tech/logs/master-replica-0"   
 receiveTimestamp:  "2017-11-28T16:37:27.139888642Z"   
 resource: {
  labels: {…}   
  type:  "ml_job"    
 }
 severity:  "ERROR"   
 timestamp:  "2017-11-28T16:37:18.590551137Z"   
}

错误之后没有其他事情发生(至少不会持续十分钟),我必须手动停止工作。

谢谢!

1 个答案:

答案 0 :(得分:0)

我使用带有ml-engine的Estimator API有类似的问题。解决方案是使用tf.estimator.train_and_eval()。请参阅我的其他帖子ml-engine vague error: "grpc epoll fd: 3"