通过MXnet理解LayerNorm,InstanceNorm

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/TH_NUM/article/details/85069076

LayerNorm:

可以看一下MXnet的函数定义：

使用函数LayerNorm:

使用公式计算：

InstanceNorm

先看一下Mxnet的函数定义：

使用InstanceNorm计算：

使用公式计算：