在TensorFlow中保持权重矩阵不变

时间:2018-07-02 10:23:21

标签: python python-3.x tensorflow

因此,我是在受Bengio论文影响的Andre Ng的设计下,在TensorFlow中编写word2vec模型。在此模型中,单词嵌入是输入,并且假设存在上一层,则梯度下降一直持续到输入层。

我通过为单词实现一个热模型来解决这个问题,该模型仅通过选择一个身份权重矩阵就能激活某些节点(对应于下一层中的单词)。唯一的问题是该权重矩阵需要保持恒定。如何在TensorFlow中完成

TL; DR -NN特定层的权重矩阵必须保持恒定(这也是反向传播的最后一层),如何在TensorFlow中实现?

0 个答案:

没有答案