将多模态间的特征分为共同特征和模态独有特征,缩小共同特征差距使之映射到共同子空间
利用双鉴别器
第一个鉴别器用来识别多个模态的共同特征,并说明特征属于模态m的可能性p
定义权重w = 1-p来将这个权重结合多模态给第二个鉴别器鉴别
第二个鉴别器利用极大极小损失函数进行训练
将多模态间的特征分为共同特征和模态独有特征,缩小共同特征差距使之映射到共同子空间
利用双鉴别器
第一个鉴别器用来识别多个模态的共同特征,并说明特征属于模态m的可能性p
定义权重w = 1-p来将这个权重结合多模态给第二个鉴别器鉴别
第二个鉴别器利用极大极小损失函数进行训练