ISP—图像调试实习生（第15天）

ISP—3DNR图像去噪

空域接口说明

时域接口说明

色度信息去噪

调试

以海思3516EV200为例去调试3DNR

3DNR参数接口

3DNR 的亮度去噪（ NRy ）由四级串联去噪功能组成，按如下分为 4 级，假设编号为0 ， 1 ， 2 ， 3 ，不同级之间的同样编号、类型滤波器效果由于实现差异、串联效应等，导致不同级结果并不完全一样。

第 0 级、第 3 级为带时域辅助的空域滤波器，第 1 级、第 2 级则为时空域处理。色彩滤波器独立于亮度滤波器。如下图所示：

说明：

nX**,mX** 参数里面的 X 的均指级数，代指第 n 级。如 n0sf2 特指 nXsf2 系列参数里的第 0 级对应参数， m1id0 特指 mXid0 系列里第一级对应参数。第 3 级空域滤波器参数 [nXsf5] 、 [dzsf5] 、 [nXsf6] 、 [nXsfr6] 、 [nXsbr6] 、 [nXsfn] 、 [nXsth] 、 [nXsthd] 和 [sfr] 分别有两套接口（如图 1-2 中的 3a 和 3b 区域），作用于运动区域（ 3a ）和静止区域（ 3b ），实现不同的处理效果。第 3 级使能，需要第 2 级使能并且打开时域参考，否则第 3 级无实际效果。

空域滤波包含 0~4 号基础滤波器即 nXsf0 、 nXsf1 、 nXsf2 、 nXsf3 、 nXsf4 ，也包含基础滤波器的组合处理。不同级采用了不同类型的空域滤波器，第 0 级和第 1 级采用的滤波器去噪保边的能力较强，但易出现条状噪声（称为 SFi 滤波器组）。第 2 级和第 3 级的滤波器去噪保边的能力稍弱，但副作用较小（称为 SFk 滤波器组）。

空域接口说明

下图是低光环境下的0、1、2、3级基本空域滤波器参数配置

[kmode] ：用于决定第 2 级和第 3 级滤波器的 SFk 滤波器是否根据亮度决定不同的去噪强度。

[nXsf5] ：该接口用于调试五号滤波器，是一号至四号滤波器的混合结果，用于组合不同频段的降噪或者细节增强。其中四个参数分别用于配置四组滤波器结果，第一个参数用于配置一号滤波器结果，以此类推。

[sfs5] ：该接口用于第 3 级，设置五号滤波中四组滤波器的强度，值越大滤波或者增强的效果越强。

[dzsf5]: 该参数用于控制五号滤波器结果在图像中的作用范围，该值越小，作用的范围越大，当设置成 999 的时候，相当于关闭五号滤波器功能，取值范围为 [0,999] 。

[nXsf6] ：该接口配置六号滤波器结果，为两组滤波器的混合结果。该接口前两个参数为参与混合滤波器号码（可以从 0~5 号滤波器中选择）。最后一个参数则为混合方式，取值范围 [0, 4] 。该参数取 0 的时候输出是原始值，其他表示四种不同的混合方式：

[nXsfr6] ：该接口在 sf6 接口的第四个参数选择 4 的时候生效。用于该模式约束的四种检查机制，值越大倾向选择 [nXsf6] 的第二个结果。取值范围均为 [0,31] 。结果取 4 种方式中最靠近第二个结果的。

[nXsbr6] ：该接口用于六号滤波器的亮暗非对称调节。该参数只在 [nXsf6] 第四个参数选择 4 的时候生效，两个参数用于分别控制 [nXsf6] 第一个结果和第二个结果混合比例，可以配置在亮和暗的两个结果采用不同的混合比例。

[nXsfn] [nXsth/nXsthd] ： nXsfn 表示不同图像特征区域选择不同滤波器的类型，取值 [0,6] ，与 [nXsth/nXsthd] 接口配合使用， nXsth/nXsthd 则表示不同区域的特征区分阈值的上下限，取值为 [0,511] ， nXsth 的取值应大于等于 nXsthd 。

[sfr] ：整个空域滤波结果控制，取值 [0,31] ，值越大空域作用程度越强，当 N 为0 ，则空域滤波关闭。

[DeRt]: 该接口的第一个参数为 0 表示非串行（普通）模式（如图 2-1 ）。大于 0的时候，表示串行模式（如图 2-2 ）。串行模式仅适用于 NRy 第 0 级和 NRc 模块。

[SelRt]: 用于产生串行模式的叠加细节的 0 ， 1 ， 2 号滤波器结果的混合比例，取值范围为 [0, 16] 。第一个参数决定 0 和 1 号滤波器结果的混合比例，第二个参数决定 1 和 2 号滤波器结果的混合比例。该接口取值越大会叠加更多的细节，但同时噪声也会相应加大。

在非串行模式下，两个值只能取值 16 。

时域接口说明

每一级都包含了时域信息用于图像处理，第 1 级的时域可采用分层处理结构，其中每个时域的接口都有两套分别对应于两层，（如果接口有多个参数，接口带上后缀 0,1 来区分层级，例如 nXtfr0, nXtfr1）。针对 IPC 应用场景一般建议采用分层处理，将第 1 层设置为背景层，将第 0 层设置为前景层分开处理。

[ref]:该接口表示参考帧开关。一般设置为1。

[tedge]:对可能产生拖尾内容区域的处理，0 表示关闭，不做处理，1 则处理可能出现的拖尾，2 和 3 则处理可能出现的模糊。

[nXstr] ：时空域滤波处理，减小噪声，但可能引入一定的蒙纱噪声。值越大去噪噪声越好，蒙纱噪声出现概率越高，取值 [0,31] 。

[nXsdz] ：用于配合 nXstr 接口对应的空域滤波器的限制，参数取值为 [0,999] ，值越小 nXstr 作用越明显，取值 999 相当于该级的空域滤波器关闭。

[nXtss] ：值越大静止区域越光滑，但静止区域图像内容可能越模糊。取值范围为[0,15] 。该参数的两个值表示分别作用不同区域。

[nXtsi] ：用于配合 nXtss 接口，取值为 0 、 1 ，分别表述不同处理方式，选择 0 是纯空域的处理方式， 1 是时空域的处理方式

[nXtfs] ：时域滤波强度，当前滤波区域使用时域时，此参数表示时域作用强度，值越大强度越大。该接口的取值范围是 [0, 15] 。

[nXtfr] ：拖尾、去噪平衡控制参数。总共 6 种处理方式，每个值越小可以控制拖尾越小，但去噪能力减弱。结果取 6 种方式中去噪效果最明显的一种。取值范围均为 [0,31] 。

[nXtfrs]: 第 0 级有效，用于配合 [nXtfr] 使用，值越大空域效果越强。

[nXdzm] ：用于 tdz 接口的选择模式，取值范围 [0, 1] 。

[nXtdz] ：用于保护纹理或者去噪效果加强。取值范围 [0, 999] 。

[nXtdx]：默认值为2，不建议修改

[mXmath/mXmathd] ：动静判决阈值的上下限，其值越大，被运动检测单元判定为 “ 静止 ” 的像素越多，因而被实施时域滤波的像素也越多，画面当然也越安静，一般情况下，将 TFS 调最大，将 mXmath/mXmathd 调到刚好抑制雨点现象，这时再适当调低 TFS 直到没有雨点；第 1 级采用分层应用，系统会先根据该接口的第二个值划分出图像的静止区域，作为图像的背景层（即绝对静止区域）。剩余图像作为前景层，将会根据第一个参数继续划分出相对静止区域和运做分别处理。第 3 级的 mXmath/mXmathd 用于划分图像为运动和静止区域，可以分别滤波或者增强处理，但无时域滤波效果。该接口的取值范围是 [0, 999] 。 mXmath 的取值应大于或等于 mXmathd 的取值。

[mXmate] ：表示平坦区域运动检测指数，其值越大，被平坦运动检测单元判定为“ 静止 ” 的像素越多，因而被实施时域滤波的像素也越多，画面当然也越安静；一般需要先将 math 调试到合适，再微调 mate ，以平衡雨点噪声和运动拖尾为合适，其取值范围为 [0,8] 。

[mXmabw] ：运动检测内容窗口大小的选择，主要配合 math 使用，值越大，窗口越大。当在低照度下 math 调大还不能抑制雨点，建议将 mabw 调试到 7 以上，从而可以减轻 math 抑制雨点的负担，降低时域滤波的副作用，取值范围为 [0, 9] 。如果某一级分层处理，背景层（第 1 层）的 mabw 的取值范围为 [5, 9] ；前景层（第 0 层）的取值为 [0, 9] ，但推荐使用 [0, 4] 以防止拖尾。如果不分层（也就是 biPath = 0 ） , mabw 的取值范围为 [5, 9] 。

[mXid] ：根据 [mXmath] 的结果分为不同区域，分别选择采用哪种输出效果。每个数的取值为 [0,3] ，分别表示 [sfr] 、 [nXstr] 、 [nXtfr] 、 [nXtfs] 的输出结果，取值越大，时域参数作用越强。

[mXmabr] 和 [mXmadz] 其滤波器的选择对应于 mXid 中的第二个参数。

[AdvMath] 开关用于选择普通型动静判决接口 math 还是增强型动静判决接口，建议在分层处理时开启该开关，增强模式只作用于第一级的前景层。当采用增强型接口，前景层的 math 设置的值通常小于普通型接口的值。取值范围 [0, 1] 。 0 为普通模式， 1 为增强模式。如果不分区域，该接口取值为 0 。

[AdvTh] 该接口决定增强型 math 的作用强度。值越小，作用越强。

[mXmatw] 时域滤波防运动拖尾指数，该值越大，运动拖尾收敛越快，反之，该值越小，运动拖尾收敛越慢，其取值范围为 [0, 3] 。一般默认为2。

[mXmasw]：时域滤波防雨点指数，该值越大，有助于降低雨点噪声出现的概率，其取值范围为 [0,15]。一般不建议调试，设置为默认值 12。

色度信息去噪

视频色度去噪接口 NRc 去噪主要调试参数为 sfc ， tfc ， trc, tpc 。

色度去噪主要调试参数为 sfc ， trc ， tfc ， tpc ；在低照度下，由于色度噪声比较强，一般调试 sfc=255 ， tfc =15 ， tpc = 15 ， trc =255 ；正常照度下，色度噪声比较弱，可以适当将 sfc ， trc ， tfc ， tpc 调小

[sfc] ：表示色度空域滤波强度，取值范围为 [0, 255] 。