层规范化,具有平均功率约束

时间:2018-01-24 05:34:27

标签: python tensorflow deep-learning keras normalization

我正在研究论文“物理层深度学习简介”。在使用python Keras实现建议的网络时,我应该规范化一些值,即前一层的输出 一种方法是简单的L2标准化,|| X || ^ 2 = 1,其中X是前一层输出的张量。
作为代码

from keras import backend as K
Lambda(lambda x: K.l2_normalize(x,axis=1))

另一方面,我想知道的是|| X || ^2≤1 有没有什么方法可以限制图层输出的值?

1 个答案:

答案 0 :(得分:0)

我解决了!
通过使用“批量标准化”可以轻松实现标准化。