训练最先进的深度神经网络的计算成本很高。减少训练时间的一种方法是使神经元的活动正常化。最近引入的一种称为批量归一化的技术，使用小批量训练案例中神经元的输入总和的分布来计算均值和方差，然后使用它们对每个训练案例上该神经元的输入总和进行归一化 ...