计算时间前向传播与神经网络中的反向传播？

Question

在神经网络的反向传播中，正向传播中的点积等与衍生物等的计算时间差是多少？此外，权重更新程序是否被视为反向传递计算时间的一部分？比率正向传递/反向传递comp。时间变化取决于架构，例如CNN，RNN，LSTM？谢谢。