量化嵌入

时间:2016-04-12 21:54:49

标签: tensorflow quantization

我想将嵌入量化为每个维度中的单个带符号字节。如果我尝试通过将值缩放到[-127,128]来执行此操作,然后转换为tf.int8,重新转换为tf.float32并重新缩放到原始[-1,1]范围,我会收到以下错误:< / p>

  

ValueError:没有为任何变量提供渐变

相同的训练脚本在没有量化步骤的情况下工作正常。

根据this thread,量化运算将成为张量流的未来特征。同时这个简单的量化场景有一个很好的解决方法吗?

0 个答案:

没有答案