在tensorflow中加载旧检查点

时间:2017-04-10 10:38:16

标签: tensorflow

我使用Tensorflow r0.12训练了一些模型并保存了它。后来我更新到r1.0.1。某些模型正在加载而没有任何问题,但如果模型中包含RNN单元格,则加载失败并显示Key layer-5/bidirectional_rnn/bw/multi_rnn_cell/cell_1/basic_rnn_cell/biases not found in checkpoint。 另外,如果我检查model.index文件,我会看到类似的条目,例如:5/BiRNN/BW/MultiRNNCell/Cell0/BasicRNNCell/Linear/Bias

包含RNN单元格的套件现在位于tf.contrib.rnn(0.12中为tf.nn.rnn_cell),因此我认为某些命名已更改。

问题是: 有没有办法加载我的模型,重新映射其张量并保存,以便张量名称与r1.0兼容?

P.S。如果有帮助,我也有model.meta个文件。

谢谢!

1 个答案:

答案 0 :(得分:0)

如果有人遇到同样的问题,这就是我使用的解决方案。它是inspect_checkpoint.pytensorflow.python.tools的张量打印函数的修改版本。


def resave_tensors(file_name, rename_map, dry_run=False):
    """
    Updates checkpoint by renaming tensors in it.
    :param file_name: Filename with checkpoint.
    :param rename_map: Map from old names to new ones
    :param dry_run: If True, just print new tensors.
    """
    renames_count = 0
    reader = pywrap_tensorflow.NewCheckpointReader(file_name)
    var_to_shape_map = reader.get_variable_to_shape_map()
    for key in sorted(var_to_shape_map):
        print("tensor_name: ", key)
        tensor_val = reader.get_tensor(key)
        print('shape: {}'.format(tensor_val.shape))
        if key in rename_map:
            renames_count += 1
            key = rename_map[key]
        tf.Variable(tensor_val, dtype=tensor_val.dtype, name=key)
    saver = tf.train.Saver()
    if not dry_run:
        with tf.Session() as session:
            session.run(tf.global_variables_initializer())
            saver.save(session, file_name)
    print('Renamed vars: {}'.format(renames_count))