Batch Normalization理解

  • 下面一篇博客讲解得很好,最重要的是要搞清维度问题!

首先引用一下第一篇博文并稍加改动使易于理解:

Batch Noramlization 是想让输入满足同一个分布, 那么是让输入的什么特征满足同一分布呢?那就是让一个batch中各张图片的相同通道的所有像素值的均值和方差相同。比如我们有两张图片(都为3通道),我们现在只说R通道,我们希望第一张图片的R通道的均值 和 第二张图片R通道的均值相同,方差同理。

这里说明一下,在batch_size方式处理中,所有本batch输入的图片共享一组卷积核。同一卷积核输出后的所有特征图属于一个通道(channel),而本文中要求的均值,即在分别这些同一个通道上进行。

参考:

在此感谢各位博主

发布了18 篇原创文章 · 获赞 0 · 访问量 479

猜你喜欢

转载自blog.csdn.net/m0_38139098/article/details/104588320