如何使用tf.estimator返回预测和标签(使用预测或eval方法)?

时间:2017-11-17 11:16:01

标签: python tensorflow tensorflow-datasets

我正在使用Tensorflow 1.4。

我创建了一个自定义的tf.estimator来进行分类,如下所示:

def model_fn():
    # Some operations here
    [...]

    return tf.estimator.EstimatorSpec(mode=mode,
                           predictions={"Preds": predictions},
                           loss=cost,
                           train_op=loss,
                           eval_metric_ops=eval_metric_ops,
                           training_hooks=[summary_hook])

my_estimator = tf.estimator.Estimator(model_fn=model_fn, 
                       params=model_params,
                       model_dir='/my/directory')

我可以轻松训练:

input_fn = create_train_input_fn(path=train_files)
my_estimator.train(input_fn=input_fn)

其中 input_fn 是一个使用 tf.data.Dataset API tfrecords文件读取数据的函数。

当我正在阅读tfrecords文件时,在进行预测时,我的内存中没有标签

我的问题是,如何通过 predict()方法或 evaluate()方法返回预测和标签?

似乎没有办法同时拥有这两者。 predict()没有对标签的访问权限(?),并且无法使用 evaluate()方法访问预测字典

1 个答案:

答案 0 :(得分:9)

完成培训后,在'/my/directory'中,您有一堆检查点文件。

您需要再次设置输入管道,手动加载其中一个文件,然后开始循环存储预测和标签的批次:

# Rebuild the input pipeline
input_fn = create_eval_input_fn(path=eval_files)
features, labels = input_fn()

# Rebuild the model
predictions = model_fn(features, labels, tf.estimator.ModeKeys.EVAL).predictions

# Manually load the latest checkpoint
saver = tf.train.Saver()
with tf.Session() as sess:
    ckpt = tf.train.get_checkpoint_state('/my/directory')
    saver.restore(sess, ckpt.model_checkpoint_path)

    # Loop through the batches and store predictions and labels
    prediction_values = []
    label_values = []
    while True:
        try:
            preds, lbls = sess.run([predictions, labels])
            prediction_values += preds
            label_values += lbls
        except tf.errors.OutOfRangeError:
            break
    # store prediction_values and label_values somewhere

更新:已更改为直接使用您已有的model_fn功能。